Facebook現(xiàn)在使用AI和機(jī)器學(xué)習(xí)來創(chuàng)建沒有任何深度圖數(shù)據(jù)的3D照片

回到2018年Facebook的F8開發(fā)者大會上，該公司首次宣布了該平臺的一項新功能，稱為3D照片。顧名思義，該功能使您可以在Facebook News Feed中發(fā)布和查看三維照片。這些照片會像其他任何照片一樣顯示在新聞源中，但是當(dāng)您滾動它們，輕按它們或傾斜設(shè)備時，3D照片的透視圖就會改變。您也可以使用Oculus Go或Oculus Rift等虛擬現(xiàn)實耳機(jī)查看3D照片。在發(fā)布時，只有在您將深度圖文件導(dǎo)入桌面并使用雙攝手機(jī)(如最新的三星Galaxy或iPhone設(shè)備)的情況下，F(xiàn)acebook才允許用戶創(chuàng)建3D照片。使用雙攝像頭的原因是Facebook可以根據(jù)從兩個攝像頭捕獲的圖像創(chuàng)建深度圖。但是，現(xiàn)在，不再需要雙攝像頭才能在Android手機(jī)上創(chuàng)建3D照片。

根據(jù)該公司最近的博客文章，F(xiàn)acebook現(xiàn)在使用AI和機(jī)器學(xué)習(xí)來創(chuàng)建沒有任何深度圖數(shù)據(jù)的3D照片。正如 VentureBeat 解釋的那樣，該公司改進(jìn)了機(jī)器學(xué)習(xí)算法，從而可以推斷圖像的3D結(jié)構(gòu)而無需深度數(shù)據(jù)。此外，該功能現(xiàn)在也適用于自拍照，繪畫和復(fù)雜場景。

為了實現(xiàn)這一壯舉，F(xiàn)acebook使用了數(shù)百萬對3D圖像及其深度圖來訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)。經(jīng)過訓(xùn)練后，此神經(jīng)網(wǎng)絡(luò)現(xiàn)在可用于推斷沒有隨附深度圖的3D圖像的外觀。這種神經(jīng)網(wǎng)絡(luò)可以在幾分之一秒內(nèi)在典型的移動處理器上運(yùn)行，使其適合3D照片功能。去年下半年，Google還啟用了AR Core的深度API中的類似功能，該功能允許該平臺使用單個攝像頭創(chuàng)建深度圖。

但是，即使有了新的改進(jìn)，該功能也有一些限制。根據(jù)Engadget 對此事的報道 ，盡管現(xiàn)在任何設(shè)備都可以在新聞Feed中查看3D照片，但在Facebook應(yīng)用中發(fā)布3D照片的功能僅限于iPhone 7和更高版本，以及一些“中檔或更好的Android手機(jī)，包括三星的Galaxy Note 8和Note 9，以及整個Pixel系列(不包括預(yù)算友好的Pixel 3A)。伴隨著這一新的發(fā)展，還值得注意的是，F(xiàn)acebook目前正在為您在新聞源上發(fā)布的照片測試圖像編輯建議功能。