北京2022年1月10日 /美通社/ -- 網易作為國內領先的互聯(lián)網技術公司,不僅在互聯(lián)網開發(fā)、服務與技術等方面保持業(yè)界領先地位,而且具有前瞻意識。在評測過動作捕捉對于游戲制作的優(yōu)勢后,層層篩選最終選擇與擁有多年國際先進虛擬制作技術經驗和本地優(yōu)質服務的北京迪生數字娛樂科技股份有限公司(簡稱:迪生數字)進行合作,并搭建了國際頂尖的NETEASE CAPTURE 動作捕捉工作室。
本著對動捕產品的熱情和技術創(chuàng)新的執(zhí)著,網易互娛動捕中心與迪生攜手并進,于2021年11月13日在廣州網易互娛動捕中心聯(lián)合完成了國內首次大型動捕技術全新挑戰(zhàn) -- 25人同場實時動作捕捉,最終獲得驚人的視覺成果,成功打破了英國屢獲殊榮的著名視效公司Audiomotion Studios于2015年3月9日創(chuàng)造的19人同場實時動作捕捉的吉尼斯世界記錄。
一直以來,網易互娛動捕中心秉承對動畫品質和制作流程的極致追求,在此次技術挑戰(zhàn)中,對迪生技術團隊提出了更高要求。迪生則基于對動捕技術二十多年的深度探索,竭盡所能地將客戶的創(chuàng)意構想最大化落地。雙方發(fā)揮各自優(yōu)勢共同完成此次挑戰(zhàn),突破動捕技術的邊界。
技術難點:
由于此次技術挑戰(zhàn)面臨人數之多、場地之大、數據量之復雜,為此技術人員提前對技術、人員調配做了全面的應對和預備方案。
技術分享:
一、精準部署 -- 場地硬件調試環(huán)節(jié)
在網易30米×20米×6.75米的動捕空間里,由于捕捉25人身上反光標記點多達1450個,所以對130個Vicon Vantage16攝像機的部署十分考究,充分發(fā)揮每一臺攝像機的最大化作用。為此技術人員利用了Shogun軟件能根據場地大小合理布局鏡頭數量和方向,以及Vantage16攝像機1600萬超高像素和靈活可選鏡頭可視角度的優(yōu)勢,對部分攝像機進行調整來優(yōu)化攝像機的場地覆蓋,從而更好的適應這種人數較多的捕捉項目。
二、快速準備 -- 實時角色創(chuàng)建環(huán)節(jié)
技術人員采用兩套點位模板對演員進行嚴格的標準反光標記點位置粘貼,并為每位演員制作了獨一無二的標記簇,以增加演員識別度,減少由于演員身材比例相似而被系統(tǒng)識別錯誤的機率。同時Shogun高質量的骨骼解算能力也為演員的角色創(chuàng)建過程節(jié)省了大量時間,最終不到1小時,就完成了對25人從穿衣、貼點到角色創(chuàng)建的拍攝前準備。
三、高效錄制 -- 三方完美配合環(huán)節(jié)
在重要的動捕錄制環(huán)節(jié)中,要想在最短的時間獲得最高效的捕捉體驗,就需要演員、技術以及設備三方的完美配合,而這些配合的關鍵都在對演員、技術組、Vicon動捕系統(tǒng)發(fā)出挑戰(zhàn)。為此,需要做的是:首先技術組需提前布置捕捉的工作流程、呈現(xiàn)平臺以及便于導演和演員實時監(jiān)看表演結果的回放支持;其次讓演員熟悉整個捕捉的內容、流程和注意事項;最后就是準備了多機同步實時解算方案,分散計算機的解算壓力,提高Shogun對數據的處理以及承載能力。
技術關鍵:
如何進行快速高效的動捕數據錄制,值得關注的三個關鍵點:
由于演員長時間的表演,可能會出現(xiàn)T-pose不標準、反復進出場地、在場地內坐躺休息等情況,但是Shogun快速骨骼識別的能力,幫助減少了因角色識別錯誤造成的時間損失。
25人同場實時動作捕捉勢必會出現(xiàn)嚴重的反光標記點遮擋,但Shogun強大的骨骼動力反向解算能力,保證了即使在做復雜的交互,如擁抱、握手、搭肩、跳躍等動作,或者在場地邊緣進行表演,甚至標記點錯位和丟失時,依然不會造成骨骼扭曲和消失。
錄制如此復雜且大體量的25人動捕表演數據,對軟件的數據處理能力也是一大考驗。但Shogun將所有數據實時寫入磁盤,并且可以對數據進行批量處理,為后期的優(yōu)化工作提升了效率。
最終網易與迪生的專業(yè)技術團隊、敬業(yè)的演員以及Vicon動捕系統(tǒng)的完美配合,使得此次國內首次25人的同場實時動作捕捉挑戰(zhàn)成功。一直以來,網易作為業(yè)內敢于突破和挑戰(zhàn)的領頭人,為行業(yè)提供了非常有力的參考依據,同時迪生技術團隊的支持也為探索動捕邊界提供了堅實的保證。當然,這不僅只是一次挑戰(zhàn)而已,還是我們觸及動捕邊界的開始,未來,雙方還將基于動捕技術進行更廣泛深入的開發(fā)探索。
隨著虛擬制作、數字人等技術的逐步發(fā)展,動捕技術將發(fā)揮更大作用,它為虛擬與現(xiàn)實世界搭建了更加穩(wěn)固的橋梁,配合制作人員的創(chuàng)意實現(xiàn)跨越式發(fā)展并對行業(yè)進行不斷革新,而這些也正是迪生所不斷期待和努力的。