借助神經(jīng)網(wǎng)絡(luò)，2D照片可變成3D面部模型

 現(xiàn)在，隨著人們不僅可以在游戲中自由選擇不同的化身，而且也能導(dǎo)入圖像和3D掃描來創(chuàng)造與自己相同的化身，游戲中的個性化正在變得越來越流行。像《NBA 2K17》這樣的高端游戲就為玩家整合入了3D掃描技術(shù)，隨著3D掃描變得越來越容易，這一現(xiàn)象也越來越普遍。

盡管3D掃描越來越受歡迎，但它仍然比2D拍攝更復(fù)雜、更麻煩?，F(xiàn)在，得益于南加州大學（Univeristy of Southern California）的一個研究項目，將2D照片轉(zhuǎn)變成一個非常翔實的3D渲染似乎成為可能。通過使用深層神經(jīng)網(wǎng)絡(luò)，研究人員向我們展示了如何將面部的2D照片轉(zhuǎn)換為極其精確的3D模型。

如果穆罕默德·阿里的空洞的黑眼睛讓您感到不舒服，您一定不是有這種感覺的人。盡管眼睛上出現(xiàn)了這種怪異的峽谷效果，但這項新技術(shù)仍然令人印象深刻。據(jù)天工社了解，傳統(tǒng)上，面部映射需要對象的一系列從各種角度拍攝的完整而清晰的圖像。然而，通過使用復(fù)雜的神經(jīng)網(wǎng)絡(luò)并結(jié)合一個全面的“面部數(shù)據(jù)庫”，研究人員能用一張2D照片生成一個非常翔實的3D面部模型。通過對大量可能的紋理和膚色進行篩選，神經(jīng)網(wǎng)絡(luò)會自動生成面部模型。

“通過對重建的特征相關(guān)性進行迭代優(yōu)化，我們?nèi)斯ず铣闪艘粋€完整而逼真的紋理圖。借助這些高分辨率的紋理和一個商業(yè)化的渲染框架，我們創(chuàng)造出高保真的3D渲染。在視覺上，它們可與使用先進的多視圖臉部捕獲系統(tǒng)所獲得的渲染媲美，”該研究說。

雖然這種新的面部3D建模技術(shù)的潛在應(yīng)用多種多樣，但它的一些主要應(yīng)用可能還是在于在線游戲領(lǐng)域，尤其是虛擬現(xiàn)實。終，研究人員傾向于用他們的研究為在線VR平臺生成全尺寸的3D化身。換句話說，為了生成一個人面部的精確3D虛擬模型，您不需要對他或她的臉進行一個完整的3D掃描，有他們的一張照片就行了。
該研究項目為在虛擬環(huán)境中創(chuàng)建逼真化身提供了一種新技術(shù)，說不定有一天，該技術(shù)甚至還可以用來創(chuàng)建可3D打印的模型。
（編譯自3Ders.org）