美國專利與商標局今日正式授予蘋果一項專利,涉及利用基於機器學習的血流追蹤技術進行下一代逼真化身的生成。這項技術最佳範例在蘋果技術發展群組副總裁麥克·洛克威爾(Mike Rockwell)介紹蘋果 Vision Pro 時進行了展示。
洛克威爾剖析Vision Pro
洛克威爾表示:「對於像 FaceTime 這樣的數位通訊,Vision Pro 不僅局限於傳遞你的眼睛,還能創造出你真實的影像。這是我們在構建 Vision Pro 時面臨的最大挑戰之一。沒有攝像頭能夠拍攝你,即使有,你也戴著眼罩。利用我們最先進的機器學習技術,我們創造了一個全新的解決方案。」
技術細節解析
這項專利全名為《基於機器學習的血流追蹤》,能夠通過機器學習推斷“血流紋理圖”,以展現虛擬人像的情感和臉部表情更為逼真。
血流追蹤技術深度剖析
現有的虛擬人像系統通常無法傳達微妙的臉部特徵或情緒狀態,而蘋果的這項技術如果商用化,將能夠準確傳達使用者的真實情感。
紋理細節及技術應用
血流可通過提取照明分量確定,因為它從反照率圖中移位。反照率貼圖描述了具有完美漫射光和主體皮膚靜態版本的臉部紋理。因此,擷取的照明分量指示特定表情與反照率貼圖的偏移量。
專利技術背後的神秘
在這項專利中,自編碼器指的是一種用於以非監督方式對數據進行分類的人工神經網絡類型。自編碼器的目標是學習數據集的最佳化表示形式。訓練有素的自編碼器將具有編碼器部分、解碼器部分和潛在變量,這些變量代表了數據的最佳化表示。