重慶3D動畫公司用語音就能創作3D動畫
自這兩年(nian)VR逐(zhu)漸(jian)被人熟(shu)知以來(lai),現在(zai)的(de)(de)(de)(de)在(zai)R的(de)(de)(de)(de)殺(sha)手級應用(yong)中有一個(ge)話題一直(zhi)被廣泛的(de)(de)(de)(de)討論,雖(sui)然這個(ge)內容也不少,但真正能打開整(zheng)體VR市場(chang)和3D動畫市場(chang)的(de)(de)(de)(de)還是(shi)寥寥無幾。基于(yu)大IP可能是(shi)破圈最成(cheng)功的(de)(de)(de)(de)VR游(you)戲之一,吸(xi)引了許(xu)多在(zai)3D端用(yong)PC版(ban)的(de)(de)(de)(de)《半衰(shuai)期(qi)》玩家,自該作于(yu)去年(nian)3月上(shang)線(xian)至今(jin),市面上(shang)還沒能出現第二款超越的(de)(de)(de)(de)作品。即使是(shi)Oculus Studios重磅發行的(de)(de)(de)(de)《榮譽(yu)勛(xun)章:超越巔峰》,也未能達到粉絲們的(de)(de)(de)(de)預期(qi)。
那么人們不禁猜想,什么樣的內容才能吸引廣大消費者爭相體驗?參考以往重慶3D動畫公司的PC端、Switch端的一些爆款游(you)戲,像《我的世(shi)界》、《塞(sai)爾達傳奇》這(zhe)種(zhong)開放世(shi)界游(you)戲總(zong)能(neng)吸(xi)引源源不斷的玩(wan)家,甚至能(neng)讓掌機(ji)等硬件(jian)產品也成為爆款。
因(yin)此(ci),或許VR也需要一款規(gui)模足夠大的開放(fang)世界(jie)/沙(sha)盒(he)游戲,然而這樣的愿景可能因(yin)為種(zhong)種(zhong)技(ji)術原因(yin)(硬件、傳輸(shu)速度等等)一直未能實(shi)現。
近期,一(yi)個(ge)叫Gordon Midwood的(de)游戲開(kai)發者推出了(le)一(yi)個(ge)有(you)趣的(de)3D創作插件:Anything World,如(ru)果用于(yu)VR中,有(you)望讓(rang)沉浸(jin)式3D創作更(geng)簡單,成為一(yi)種不(bu)管是誰都可(ke)以使用的(de)有(you)趣應用。
Anything World是一個Unity插件,該插件除了可以在網頁端在線體驗,技術還應用于《Rabbids Playground》、《Speak To Anything》等AR游戲,將AI語音識別與互動游戲相結合。
其特點是操作簡單,通過語音識別就能創作3D動畫,實時生成動物、汽車等3D模型,還可以用語音設定不同角色的動作,包括追趕、跟隨、駕駛、攻擊等等。它的使用方法足夠簡單,即使沒有重慶3D動畫公司的(de)(de)開(kai)發經驗(yan)的(de)(de)人(ren)也可以輕松進行(xing)創(chuang)作,無需(xu)手(shou)動建模、骨骼綁定、紋理渲染、多邊形優化等復雜的(de)(de)工序,而且不需(xu)要購(gou)買(mai)或導入3D模型(xing),該(gai)插件中已經包(bao)含大量角色和內容。
也就(jiu)是說,利(li)用(yong)Anthing World插(cha)件,你只需要動(dong)動(dong)嘴,就(jiu)能開啟上帝模式創建3D動(dong)畫(hua)和場景。實(shi)際玩法上,你更像是在講故事(shi),而該(gai)插(cha)件會利(li)用(yong)Unity引擎將你描繪的故事(shi)用(yong)3D實(shi)時(shi)展現出來。
Anything World開發(fa)團隊表示:這是一(yi)款適用于(yu)主流大眾的3D內(nei)(nei)容創(chuang)作(zuo)系統,除了設(she)定3D場景(jing)(jing)、虛擬(ni)角色和行(xing)為(wei)外,3D動(dong)物還自帶聲音(yin),可(ke)以(yi)(yi)根(gen)據與你(ni)的語音(yin)指令互動(dong),并(bing)提供反(fan)饋,因此你(ni)可(ke)以(yi)(yi)直接創(chuang)建對話內(nei)(nei)容,或(huo)者(zhe)利用系統語音(yin)代替你(ni)對話。適用人群(qun)包括(kuo):3D游戲/內(nei)(nei)容開發(fa)者(zhe)、設(she)計師(shi)、教育者(zhe)、藝術家、創(chuang)作(zuo)愛好(hao)者(zhe)等等。而未來的應用場景(jing)(jing)則包括(kuo):沙盒游戲、大學課(ke)程、3D創(chuang)作(zuo)、VR等等。
關于原理
為(wei)了實(shi)現自(zi)然流暢的3D創(chuang)作(zuo)體驗感,Anything World的AI算(suan)法需要(yao)識(shi)別和理(li)解使(shi)用者(zhe)的意(yi)圖,同時還(huan)需要(yao)讓動畫(hua)足夠生動活潑(po)且支持互動。據(ju)悉,開發(fa)者(zhe)利(li)用Google Poly和Sketchfab平臺的3D模(mo)型(xing)(xing)來訓練機器學習算(suan)法,讓算(suan)法自(zi)己分(fen)析模(mo)型(xing)(xing)的元數據(ju),因此算(suan)法在識(shi)別語音(yin)后,會盡量(liang)采用符合語音(yin)信息的3D模(mo)型(xing)(xing)。
在找到合適的3D資源后,Anything World會通過另一個算法去分析模型,并將模型與相識物體的開源點云數據集進行對比,從而對重慶3D動畫制作的模型進行分類。比如,算法可能會將3D模型分類為兩足(zu)動物(wu)、四(si)足(zu)動物(wu)、昆蟲、蛇、鳥(niao)、車(che)、汽車(che)、宇(yu)宙飛船等等。
完(wan)成分(fen)類(lei)后,算法會(hui)進一步分(fen)類(lei)3D模(mo)型(xing)的(de)不同(tong)組成部分(fen),比如動(dong)物(wu)腿、車輪等(deng)等(deng),目的(de)是為了將這(zhe)些部分(fen)的(de)網格進行(xing)分(fen)離,或是移(yi)動(dong)。接下來,會(hui)根(gen)據分(fen)類(lei)結果應用物(wu)理(li)模(mo)擬(ni)動(dong)畫著色器(qi),它將融(rong)合整(zheng)個3D模(mo)型(xing)不同(tong)部位(wei)的(de)動(dong)作。然后,會(hui)在輸出(chu)的(de)3D模(mo)型(xing)中加(jia)入行(xing)走等(deng)一些預設動(dong)作,讓它變得更(geng)智(zhi)能,可以與語音指令互動(dong)。
據悉,機器學習算法整個處理(li)流程大約需要1到2個小時,不過在資(zi)源庫中積(ji)累足夠多(duo)智(zhi)能(neng)模(mo)型(xing)(xing)后(hou),變可以支持實時生成。此(ci)外,Anything World還會采用(yong)一(yi)個更加基礎的(de)算法模(mo)型(xing)(xing),可以快(kuai)速生成3D模(mo)型(xing)(xing),但省略了(le)骨(gu)骼綁定和動作(zuo)設置環節。開發者(zhe)表示:隨著這個插(cha)件被越(yue)來越(yue)多(duo)人(ren)使用(yong),會有越(yue)來越(yue)多(duo)的(de)3D模(mo)型(xing)(xing)被使用(yong)和處理(li),未來資(zi)源庫的(de)規模(mo)也(ye)將不斷擴大。
有趣的是(shi),盡(jin)管谷歌將于今年中(zhong)旬關閉Poly平臺,但是(shi)Anything World已經(jing)將部分3D模型保存在自己(ji)的數據庫中(zhong),因此用戶也可以(yi)繼續使(shi)用這些模型。