谷歌基於機器學習 呈現最精彩人像模式
2023-07-31 04:12:38 1
近日,谷歌對新出的兩款智慧型手機中的人像系統進行了升級,谷歌這兩款手機背後都只有一個攝像頭,但由於使用了軟體和其他處理技巧,即便只有一個攝像頭,這款手機在人像模式下仍能產生焦距效果。
去年的Pixel 2和Pixel 2 XL採用了相位檢測自動對焦(PDAF),也稱為雙像素自動對焦(double - Pixel auto focus),在第二代像素上拍攝人像。雖然2017款相機的人像效果非常棒,背景模糊可以弱化也可以增強,但谷歌希望改進Pixel 3和Pixel 3xl的人像模式。
谷歌使用機器學習來幫助創建一種算法,該算法允許谷歌將這些線索組合起來,以獲得更準確的深度估計。這種基於機器學習的深度估計需要在Pixel 3上快速運行,這樣獲得人像模式的照片時,用戶就不必等待太長時間。
然而,為了獲得利用細微的散焦和視差線索的深度估計,我們必須將全解析度、數百萬像素的PDAF圖像輸入網絡。所以使用一個跨平臺的解決方案,即TensorFlow Lite,用於在移動和嵌入式設備上運行機器學習模型,這樣Pixel 3強大的GPU就可以快速計算深度,將得到的深度估計與人臉分割神經網絡相結合,產生更好的人像結果。