OPPO發布最新AI技術,幾部手機就可生成「數字分身」!
2025-05-12 01:07:09 1
在現階元宇宙等全新概念的興起之下,虛擬數字世界和現實物理世界的連接進一步加深。而在虛擬數字世界中,我們將可能通過全新的數字分身來完成日常的娛樂、乃至於學習或者工作,在虛擬和現實世界中無縫穿梭。
在虛擬實境中,我們可能需要不同的avatar作為數字分身的形象進行存在,如何建立一個高質量的「數字分身」avatar或許會在未來成為不少用戶關注的重點。而在近期,OPPO就推出了一項最新的AI技術,或許在未來能幫助用戶輕鬆創立自己的「數字分身」。
OPPO發布這一項最新AI技術在業內算是首次,這一項技術可以實現自動為寬鬆著裝人體創建動態數字孿生體的工作,通過手機攝像頭拍攝的RGB視頻即可創建用戶的「三維化身」並捕捉到相對應的一系列動態細節。
以往的人物建模需要佩戴的捕捉設備並且需要花費大量的時間及經濟成本,而在OPPO發布的這一項技術上,其採集捕捉以及門檻被大幅度降低,僅需利用幾部OPPO Find X5 Pro在人物的周圍進行多角度的拍攝,就可以記錄下一系列的人體形態數據,為下一步的「數字分身」建立基礎。
OPPO推出這一個技術和以往採用2D圖片進行重建的原理不同,在視頻錄製完成後,AI就可以通過手機錄製的RGB數據進行計算,生成3D人體模型,克服了以往方法可能導致的誤差問題。
OPPO通過一位專業的舞者,對其動作進行捕捉,設定了一系列的骨骼狀態節點,構建了一組結構化局部輻射場。局部輻射場可以模擬其相應節點周圍局部空間內的形狀和外觀,並根據身體姿態和服裝樣式的動態細節進行變化。OPPO的這一項AI技術還可以通過殘差運動(residual movements)更好體現出舞蹈時衣裙擺動的細微變化,這一套技術模型也可以應對一系列的舞蹈動作,並且可以不斷學習,支持更多的應用場景。
在幾個小時的編碼和渲染後,通過OPPO最新AI技術所打造的數字分身就可生成,並且可以對動作進行精密的結合,在數字世界中和專業舞者一樣翩翩起舞,各種動作都與真實世界幾無區別。
OPPO旗下的OPPO數字分身實驗室透露,傳統的創建3D建模方法在觀察和分離人體姿態與衣物形變之間面臨著很大困難。而在現階段神經場景渲染技術的支持下,OPPO突破性地將傳統NeRF模型分解為一組結構化的局部輻射場(structured local radiance fields),由身體骨架驅動,動態細節嵌入作為條件,提供了一種泛化性能更加的方案。
OPPO數字分身實驗室的這一套算法可以帶來更加精細化的局部輻射場,在骨架運動、殘差運動、時間變化細節上都能有更好的表現,可以對一系列場景進行更好的學習以及生成。在未來虛擬數字世界和現實物理世界更加精密結合的情況下,OPPO打造的這一套算法或將可以幫助用戶更好的生成屬於自身的數字分身,平行世界中進行更好的表達。
OPPO數字分身實驗室也提到,這一項技術的推出並不是終點,在未來,OPPO還將會進行一系列基礎的研究以及應用,為更多的行業進行賦能。
在未來的應用場景中,數字分身將會進一步推動和協助人類社會的發展,在多種場景下帶來前所未有的體驗。OPPO也將在不斷進行發力,為用戶的應用進行賦能,開啟更具有智慧的未來可能。