研究人員使用神經(jīng)網(wǎng)絡(luò)將2D照片成功轉(zhuǎn)化為3D模型

dy1993   2016-12-09 14:09:11

隨著游戲中自定義角色越來(lái)越受歡迎,現(xiàn)在人們對(duì)于制作個(gè)性化的角色形象也充滿了熱情。最近,《NBA 2K17》這樣的高端游戲就用3D掃描技術(shù)為玩家加入了自定義角色的功能。

事實(shí)上,3D掃描肯定比2D攝影更復(fù)雜、更不方便。不過(guò),來(lái)自南加州大學(xué)的一個(gè)團(tuán)隊(duì)的研究項(xiàng)目表明,似乎現(xiàn)在將2D照片經(jīng)過(guò)一個(gè)非常詳細(xì)的3D渲染,并使用深層神經(jīng)網(wǎng)絡(luò),就能夠?qū)⒚娌康?D照片轉(zhuǎn)換為3D模型。

從傳統(tǒng)意義上來(lái)說(shuō),面部掃描需要從各種角度對(duì)人進(jìn)行完美照明條件下的圖像拍攝。但是,如果使用了復(fù)雜的神經(jīng)網(wǎng)絡(luò)方式,即使是擁有部分圖像,也能夠建立一個(gè)“面部數(shù)據(jù)庫(kù)”,并生成一個(gè)非常詳細(xì)的3D面部模型。在這其中,發(fā)揮重要作用的就是神經(jīng)網(wǎng)絡(luò)。

神經(jīng)網(wǎng)絡(luò)是一種模擬大腦工作方式的計(jì)算機(jī)系統(tǒng)。它通過(guò)對(duì)可能的紋理和膚色進(jìn)行廣泛陣列,從而過(guò)濾和自動(dòng)生成面部3D模型?!巴ㄟ^(guò)對(duì)重建的相關(guān)特征進(jìn)行迭代優(yōu)化來(lái)合成完整的、具有真實(shí)感的紋理圖,然后使用這些高分辨率紋理圖進(jìn)行框架渲染。我們就可以生成高保真的3D渲染數(shù)據(jù),視覺(jué)上來(lái)看這些數(shù)據(jù)可以和最先進(jìn)的多視圖臉部捕獲系統(tǒng)獲得的渲染數(shù)據(jù)媲美?!毖邪l(fā)人員說(shuō)到。

雖然這種新的面部3D建模技術(shù)的潛力是多方面的,但它的主要應(yīng)用還是在在線游戲領(lǐng)域,特別是虛擬現(xiàn)實(shí)游戲。據(jù)悉,研究人員最終將生成用于在線VR平臺(tái)的全尺寸3D模型。換句話說(shuō),你不需要對(duì)人臉進(jìn)行完整的3D掃描,就能夠生成出準(zhǔn)確的3D虛擬模型。因此,即使你想使用美國(guó)總統(tǒng)唐納德·特朗普來(lái)作為你的游戲角色,也是可以的。

0

708 0

發(fā)表評(píng)論

登陸后參與評(píng)論