淘新聞

夢工廠元老開發VR面部還原系統

今天的高端虛擬實境平臺和設備非常擅長對使用者的身體動作進行追蹤,讓我們能夠更自然的進行虛擬實境遊戲和社交。但是目前為止除了身體動作之外,還沒有任何一款虛擬實境硬體產品能夠高度還原我們的面部特徵和表情。雖然像《Avatar》這樣的遊戲可以允許我們定制虛擬人物的面部特徵,但是都是從給定的選項中選擇,局限性比較大。

不過現在,一個名叫Loom.ai的新系統可以實現從一張靜態圖片中捕捉人類的面部特徵功能。這個系統將電腦視覺系統、機器學習能力整合到一起,並且能夠為電影帶來最頂級的效果。你可以看到安吉麗娜·朱莉、威爾·史密斯、蕾哈娜、坎耶·韋斯特和埃隆·馬斯克等高逼真還原度的虛擬人物。

公司聯合創始人兼首席執行官Mahesh Ramasubramanian曾是動畫電影公司夢工廠的元老,製作了包括《馬達加斯加3》和《怪物史萊克》等經典動畫電影。同時Loom公司的首席技術官Kiran Bhat則曾經幫助盧卡斯影業公司開發了面部識別系統,並且成功的應用到《復仇者聯盟》和《加勒比海盜》中。

目前這套系統還處於開發階段,許多方面還不是很完善,包括頭髮、牙齒和臉部的細紋等,所有生成的虛擬面部都只是相同的表情和只有一種情感變化。不過這已經算是一個非常好的開始,而未來這種系統將大幅減少在虛擬實境平臺上對面部刻畫的工作量。

其實Loom.ai並不是目前市面上唯一的類似技術,ItSeezD上周也公佈了一項非常類似IDE技術,並且來自南加州大學和Pinscreen的合作團隊也展示深度神經網路系統。不過目前來看後兩者的效果依然沒有Loom的出色,從實際測試來看,顯示出了很大的優勢。

目前Loom團隊想要繼續開發這樣的技術需要大量的資金支援,而包括像Facebook這樣的科技巨頭都已經將虛擬實境看成了未來電腦平臺的新趨勢,並且還能夠在虛擬實境世界中與現實世界的目標進行互動。