omniture

網(wǎng)易&迪生| 挑戰(zhàn)25人同場(chǎng)實(shí)時(shí)動(dòng)作捕捉,共同構(gòu)想技術(shù)可行性

北京2022年1月10日 /美通社/ -- 網(wǎng)易作為國內(nèi)領(lǐng)先的互聯(lián)網(wǎng)技術(shù)公司,不僅在互聯(lián)網(wǎng)開發(fā)、服務(wù)與技術(shù)等方面保持業(yè)界領(lǐng)先地位,而且具有前瞻意識(shí)。在評(píng)測(cè)過動(dòng)作捕捉對(duì)于游戲制作的優(yōu)勢(shì)后,層層篩選最終選擇與擁有多年國際先進(jìn)虛擬制作技術(shù)經(jīng)驗(yàn)和本地優(yōu)質(zhì)服務(wù)的北京迪生數(shù)字娛樂科技股份有限公司(簡稱:迪生數(shù)字)進(jìn)行合作,并搭建了國際頂尖的NETEASE CAPTURE 動(dòng)作捕捉工作室。

網(wǎng)易動(dòng)捕場(chǎng)地
網(wǎng)易動(dòng)捕場(chǎng)地

本著對(duì)動(dòng)捕產(chǎn)品的熱情和技術(shù)創(chuàng)新的執(zhí)著,網(wǎng)易互娛動(dòng)捕中心與迪生攜手并進(jìn),于2021年11月13日在廣州網(wǎng)易互娛動(dòng)捕中心聯(lián)合完成了國內(nèi)首次大型動(dòng)捕技術(shù)全新挑戰(zhàn) -- 25人同場(chǎng)實(shí)時(shí)動(dòng)作捕捉,最終獲得驚人的視覺成果,成功打破了英國屢獲殊榮的著名視效公司Audiomotion Studios于2015年3月9日創(chuàng)造的19人同場(chǎng)實(shí)時(shí)動(dòng)作捕捉的吉尼斯世界記錄。

動(dòng)捕現(xiàn)場(chǎng)錄制
動(dòng)捕現(xiàn)場(chǎng)錄制

一直以來,網(wǎng)易互娛動(dòng)捕中心秉承對(duì)動(dòng)畫品質(zhì)和制作流程的極致追求,在此次技術(shù)挑戰(zhàn)中,對(duì)迪生技術(shù)團(tuán)隊(duì)提出了更高要求。迪生則基于對(duì)動(dòng)捕技術(shù)二十多年的深度探索,竭盡所能地將客戶的創(chuàng)意構(gòu)想最大化落地。雙方發(fā)揮各自優(yōu)勢(shì)共同完成此次挑戰(zhàn),突破動(dòng)捕技術(shù)的邊界。

技術(shù)難點(diǎn):

由于此次技術(shù)挑戰(zhàn)面臨人數(shù)之多、場(chǎng)地之大、數(shù)據(jù)量之復(fù)雜,為此技術(shù)人員提前對(duì)技術(shù)、人員調(diào)配做了全面的應(yīng)對(duì)和預(yù)備方案。

技術(shù)分享:

一、精準(zhǔn)部署 -- 場(chǎng)地硬件調(diào)試環(huán)節(jié)

在網(wǎng)易30米×20米×6.75米的動(dòng)捕空間里,由于捕捉25人身上反光標(biāo)記點(diǎn)多達(dá)1450個(gè),所以對(duì)130個(gè)Vicon Vantage16攝像機(jī)的部署十分考究,充分發(fā)揮每一臺(tái)攝像機(jī)的最大化作用。為此技術(shù)人員利用了Shogun軟件能根據(jù)場(chǎng)地大小合理布局鏡頭數(shù)量和方向,以及Vantage16攝像機(jī)1600萬超高像素和靈活可選鏡頭可視角度的優(yōu)勢(shì),對(duì)部分?jǐn)z像機(jī)進(jìn)行調(diào)整來優(yōu)化攝像機(jī)的場(chǎng)地覆蓋,從而更好的適應(yīng)這種人數(shù)較多的捕捉項(xiàng)目。

二、快速準(zhǔn)備 -- 實(shí)時(shí)角色創(chuàng)建環(huán)節(jié)

技術(shù)人員采用兩套點(diǎn)位模板對(duì)演員進(jìn)行嚴(yán)格的標(biāo)準(zhǔn)反光標(biāo)記點(diǎn)位置粘貼,并為每位演員制作了獨(dú)一無二的標(biāo)記簇,以增加演員識(shí)別度,減少由于演員身材比例相似而被系統(tǒng)識(shí)別錯(cuò)誤的機(jī)率。同時(shí)Shogun高質(zhì)量的骨骼解算能力也為演員的角色創(chuàng)建過程節(jié)省了大量時(shí)間,最終不到1小時(shí),就完成了對(duì)25人從穿衣、貼點(diǎn)到角色創(chuàng)建的拍攝前準(zhǔn)備。

三、高效錄制 -- 三方完美配合環(huán)節(jié)

在重要的動(dòng)捕錄制環(huán)節(jié)中,要想在最短的時(shí)間獲得最高效的捕捉體驗(yàn),就需要演員、技術(shù)以及設(shè)備三方的完美配合,而這些配合的關(guān)鍵都在對(duì)演員、技術(shù)組、Vicon動(dòng)捕系統(tǒng)發(fā)出挑戰(zhàn)。為此,需要做的是:首先技術(shù)組需提前布置捕捉的工作流程、呈現(xiàn)平臺(tái)以及便于導(dǎo)演和演員實(shí)時(shí)監(jiān)看表演結(jié)果的回放支持;其次讓演員熟悉整個(gè)捕捉的內(nèi)容、流程和注意事項(xiàng);最后就是準(zhǔn)備了多機(jī)同步實(shí)時(shí)解算方案,分散計(jì)算機(jī)的解算壓力,提高Shogun對(duì)數(shù)據(jù)的處理以及承載能力。

迪生技術(shù)布置捕捉流程
迪生技術(shù)布置捕捉流程

技術(shù)關(guān)鍵:

如何進(jìn)行快速高效的動(dòng)捕數(shù)據(jù)錄制,值得關(guān)注的三個(gè)關(guān)鍵點(diǎn):

由于演員長時(shí)間的表演,可能會(huì)出現(xiàn)T-pose不標(biāo)準(zhǔn)、反復(fù)進(jìn)出場(chǎng)地、在場(chǎng)地內(nèi)坐躺休息等情況,但是Shogun快速骨骼識(shí)別的能力,幫助減少了因角色識(shí)別錯(cuò)誤造成的時(shí)間損失。

演員T-POSE
演員T-POSE

25人同場(chǎng)實(shí)時(shí)動(dòng)作捕捉勢(shì)必會(huì)出現(xiàn)嚴(yán)重的反光標(biāo)記點(diǎn)遮擋,但Shogun強(qiáng)大的骨骼動(dòng)力反向解算能力,保證了即使在做復(fù)雜的交互,如擁抱、握手、搭肩、跳躍等動(dòng)作,或者在場(chǎng)地邊緣進(jìn)行表演,甚至標(biāo)記點(diǎn)錯(cuò)位和丟失時(shí),依然不會(huì)造成骨骼扭曲和消失。

錄制如此復(fù)雜且大體量的25人動(dòng)捕表演數(shù)據(jù),對(duì)軟件的數(shù)據(jù)處理能力也是一大考驗(yàn)。但Shogun將所有數(shù)據(jù)實(shí)時(shí)寫入磁盤,并且可以對(duì)數(shù)據(jù)進(jìn)行批量處理,為后期的優(yōu)化工作提升了效率。

數(shù)據(jù)處理
數(shù)據(jù)處理

最終網(wǎng)易與迪生的專業(yè)技術(shù)團(tuán)隊(duì)、敬業(yè)的演員以及Vicon動(dòng)捕系統(tǒng)的完美配合,使得此次國內(nèi)首次25人的同場(chǎng)實(shí)時(shí)動(dòng)作捕捉挑戰(zhàn)成功。一直以來,網(wǎng)易作為業(yè)內(nèi)敢于突破和挑戰(zhàn)的領(lǐng)頭人,為行業(yè)提供了非常有力的參考依據(jù),同時(shí)迪生技術(shù)團(tuán)隊(duì)的支持也為探索動(dòng)捕邊界提供了堅(jiān)實(shí)的保證。當(dāng)然,這不僅只是一次挑戰(zhàn)而已,還是我們觸及動(dòng)捕邊界的開始,未來,雙方還將基于動(dòng)捕技術(shù)進(jìn)行更廣泛深入的開發(fā)探索。

隨著虛擬制作、數(shù)字人等技術(shù)的逐步發(fā)展,動(dòng)捕技術(shù)將發(fā)揮更大作用,它為虛擬與現(xiàn)實(shí)世界搭建了更加穩(wěn)固的橋梁,配合制作人員的創(chuàng)意實(shí)現(xiàn)跨越式發(fā)展并對(duì)行業(yè)進(jìn)行不斷革新,而這些也正是迪生所不斷期待和努力的。

消息來源:北京迪生數(shù)字娛樂科技股份有限公司
China-PRNewsire-300-300.png
全球TMT
微信公眾號(hào)“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動(dòng)態(tài)、財(cái)報(bào)信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection