高(gāo)精度的(de)虛拟 “Siren”數字人(rén)類

     “This breaks my brain.”

     目睹了舊(jiù)金(jīn)山遊戲開(kāi)發者大會（GDC）期間(jiān)的(de)一幕時(shí)，有(yǒu)人(rén)發出上(shàng)面這(zhè)句感歎。如果翻譯成中文(wén)，應該就是兩個(gè)字：“炸裂”。Epic Games推出了一個(gè)實時(shí)驅動、逼真的(de)全性能角色 “Siren”數字人(rén)類。

      Siren完全是在虛幻引擎中實時(shí)呈現(xiàn)的(de)，細節程度爆炸，效果極其驚人(rén)，這(zhè)個(gè)高(gāo)精度的(de)虛拟達到了前所未有(yǒu)的(de)程度。

    但(dàn)絕不僅是細節讓人(rén)驚歎這(zhè)麽簡單。Siren背後的(de)系統，還(hái)具備強大的(de)人(rén)類表情動作(zuò)實時(shí)捕捉以及合成技(jì)術。 

      一個(gè)真實的(de)女(nǚ)性人(rén)類在現(xiàn)場(chǎng)侃侃而談，她(tā)的(de)表情、動作(zuò)、聲音(yīn)，被實時(shí)的(de)賦予身(shēn)後大屏幕上(shàng)的(de)女(nǚ)性數字人(rén)類Siren。這(zhè)就是開(kāi)頭提及的(de)炸裂一幕。實際上(shàng)，Siren這(zhè)位小(xiǎo)姐(jiě)姐(jiě)的(de)容貌身(shēn)形，也不是憑空虛構出來(lái)。而是一位來(lái)自(zì)中國(guó)的(de)演員(yuán)：姜冰潔。而負責現(xiàn)場(chǎng)演示的(de)是英國(guó)演員(yuán)Alexa Lee，她(tā)的(de)表情和(hé)聲音(yīn)，被頭戴設備捕捉之後，與姜冰潔的(de)外(wài)貌進行合成，最後就成了Siren。  

Siren項目是始于Epic Games和(hé)騰訊之間(jiān)的(de)一個(gè)合作(zuò)，目的(de)是創建一個(gè)概念驗證演示，用來(lái)展示虛幻引擎4的(de)功能以及下(xià)一代數字角色的(de)外(wài)觀。為(wèi)了處理(lǐ)角色的(de)表演捕捉，Epic和(hé)騰訊使用Vicon的(de)Vantage系列攝像機(jī)，配合新一代強大的(de)動作(zuò)捕捉軟件(jiàn)shogun進行實時(shí)追蹤，另外(wài)用Vue實拍(pāi)攝影機(jī)拍(pāi)攝演員(yuán)動作(zuò)作(zuò)為(wèi)實時(shí)參考，将演員(yuán)動作(zuò)、動捕數據、虛拟角色三者完美(měi)的(de)呈現(xiàn)給觀衆。你(nǐ)可以很(hěn)清楚看(kàn)到人(rén)物(wù)的(de)皮膚細節、眼睛的(de)轉動、說(shuō)話(huà)的(de)神态。不管是皮膚質感，還(hái)是神态上(shàng)的(de)一颦一笑(xiào)，都(dōu)宛若真人(rén)。

     Epic Games的(de)CTO Kim Liberi說(shuō)：“當開(kāi)始研究Siren時(shí)，我們從(cóng)一開(kāi)始就知道(dào)為(wèi)了完美(měi)實現(xiàn)這(zhè)個(gè)角色，我們需要最好(hǎo)的(de)動作(zuò)捕捉硬件(jiàn)和(hé)軟件(jiàn)。因為(wèi)我們在以前的(de)舞台上(shàng)使用過Vicon系統，所以我們知道(dào)Vicon是這(zhè)個(gè)項目的(de)最佳選擇。”
     這(zhè)樣在第二個(gè)屏幕上(shàng)，就可以看(kàn)到由中國(guó)女(nǚ)演員(yuán)姜冰潔的(de)肖像創建的(de)Siren角色——同步移動，引擎中以60幀每秒的(de)刷新率驅動。為(wèi)确保盡可能高(gāo)的(de)保真度，Vicon取代了傳統的(de)複雜(zá)骨骼映射步驟，直接用自(zì)定義骨骼的(de)方式解決了Siren的(de)骨骼問(wèn)題。還(hái)開(kāi)發了一種新的(de)算(suàn)法來(lái)還(hái)原Siren的(de)手指動畫(huà)。Cubic Motion不僅為(wèi)Vicon，Epic和(hé)騰訊提供的(de)面部表演捕捉，追蹤，解算(suàn)和(hé)動畫(huà)，還(hái)提供了一個(gè)實時(shí)解算(suàn)器(qì)，用女(nǚ)演員(yuán)表情的(de)視(shì)頻(pín)反饋來(lái)實時(shí)地(dì)驅動CG角色表情。
     要創造出逼真的(de)數字角色需要的(de)不僅僅是追蹤動作(zuò)，還(hái)需要能夠将人(rén)物(wù)模仿到最細微(wēi)的(de)細節。這(zhè)次Epic在GDC上(shàng)展示的(de)虛拟人(rén)物(wù)真的(de)非常驚人(rén)。Vicon VFX産品經理(lǐ)Tim Doubleday說(shuō)：當Epic找到我們嘗試創造這(zhè)個(gè)逼真的(de)數字化(huà)身(shēn)時(shí)，我們渴望參與并希望能推動這(zhè)一領域的(de)進一步發展。