國慶到了，再聊聊神舟十二號上的數(shù)字航天員

大數(shù)據(jù)文摘授權(quán)轉(zhuǎn)載自游戲研究社

神舟十二號已經(jīng)上天80多天，還有10天左右就要返回地球了。

相比起航時的萬眾矚目，神舟十二號在太空的兩個月里相當(dāng)?shù)驼{(diào)。一方面是航天員們忙于執(zhí)行科研探索和空間站維護(hù)任務(wù)，沒有太大精力出境；另一方面，8月以來國內(nèi)諸多圈層的波瀾起伏也分散了所有人的關(guān)注點。

昨天早上，聶海勝成為了首位在軌100天的中國航天員，社交媒體和新聞網(wǎng)站紛紛發(fā)文祝賀，讓大家又一下子想起來：“在距離地球幾百公里的高空，還有3個我們的人”。

執(zhí)行三次任務(wù)，在軌100天的聶海勝

不過，“3個我們的人”也許并不準(zhǔn)確——神舟十二號升空那天，還有0.5個人，也跟著飛船上了天，在地球上的人們暫時移開目光時，一直默默關(guān)注、記錄著這次航天任務(wù)中的一切。

一位名叫“小諍”的新華社數(shù)字記者，與航天員們一起升空，進(jìn)入了中國空間站，并從外太空向地球發(fā)回了報道。她是新華社的第一位數(shù)字記者，也是全球首位數(shù)字航天員。

在亮相的報道影像中，小諍向觀眾介紹了中國和國際空間站各個艙段的功能、布置陳設(shè)，還拍攝了航天員出艙的全過程。

從報道影像中看，小諍相當(dāng)接近真人。這種“接近”倒不是說她的畫風(fēng)和建模多么復(fù)雜精細(xì)，而是她作為一個虛擬數(shù)據(jù)構(gòu)成的存在，居然有豐富的面部微表情，以及不少微妙的肢體語言。

比如她拍攝國際空間站航天員出艙時，站在艙門一側(cè)，有無意識的擺手，有微微探身查看艙門的小動作，還有幅度很小的轉(zhuǎn)頭——我第一遍看這段視頻時，甚至沒能發(fā)現(xiàn)圖像最左邊這位是小諍，還以為也是一位國際空間站航天員，就是因為這些動作細(xì)節(jié)，騙過了我大腦中的辨識器，讓我下意識認(rèn)為“有這些動作的，應(yīng)該是個真人”。

左一為小諍

眾所周知，類人形象的大敵是“恐怖谷效應(yīng)”：當(dāng)一個類人形象十分“像人”卻又有明顯非人特征的時候，我們?nèi)祟惥蜁a(chǎn)生恐懼的情緒。小諍當(dāng)然很像真人，但卻完全沒有觸發(fā)恐怖谷效應(yīng)，在B站、微博等小諍亮相的地方，大家的感覺都是“好美”“是不是戴了美瞳”“新老婆來了”，沒人覺得恐懼。

要說這是因為小諍過于完美，能騙到所有人，那也不是。我來來回回看了十幾遍小諍的視頻，發(fā)現(xiàn)原因可能在于，她幾乎沒有那種經(jīng)常能在各種虛擬形象上看到的“無機質(zhì)表情”——也就是我們俗稱的皮笑肉不笑。

這個猜測直到前幾天才得到驗證。新華社衛(wèi)星新聞實驗室在上周五發(fā)布了一個技術(shù)展示視頻，呈現(xiàn)了很多驅(qū)動小諍的技術(shù)細(xì)節(jié)，比如她說話時，整個臉頰的肌肉都在隨之而動。

再比如她的臉上其實是有毛孔的，并不是一整塊建模而來。放大之后，皮膚上的凹凸不平，甚至是鼻子里的絨毛（咦？）都能看清。在不同強度的光線下，皮膚也有不同的質(zhì)感。

和很多數(shù)字人一樣，小諍的面部動作是由微表情（BlendShapes）驅(qū)動的，每個微表情都是根據(jù)真人模特的表情進(jìn)行局部微調(diào)的結(jié)果——只不過，小諍的建模師模擬出了5000多個微表情，以至于她能做出很多沒受過演藝訓(xùn)練的正常人都做不出的微妙神態(tài)。

喜怒哀樂

我知道你們現(xiàn)在肯定很想說（或者已經(jīng)在評論里說了）“游研社除了游戲什么都研究”，但是等等，小諍其實和游戲大有關(guān)系——她是新華社和NExT Studios合作的產(chǎn)物，由后者擔(dān)任實際的動捕和建模等技術(shù)工作。

很少有游戲玩家知道，實際上從2017年開始，NExT內(nèi)部就有一個十幾人的小團(tuán)隊，一直在進(jìn)行虛擬數(shù)字人方面的嘗試。他們花了半年時間做出了可以交互的Siren（塞壬），在2018年GDC上吸引了不少眼球。

2019年NExT又做了一個男性數(shù)字人Matt，為數(shù)字人加入了帶情緒的面部動作，以及更工業(yè)化的制作流程。

而最后出現(xiàn)在我們面前的就是小諍，一個畫風(fēng)和Siren略有不同，但表情精細(xì)度猶有過之的數(shù)字人。

然而相比這些技術(shù)上的進(jìn)步，作為一個玩家，小諍最大的意義其實在于其制作時間——小諍從接到新華社的合作邀請開始，一共只做了3個月左右，比Siren快了一倍多。

3個月，看起來還是挺久。但對于制作時長動輒三四年的3A游戲來說，一個完整游戲角色的制作時間也差不多是3個月——而根據(jù)NExT的說法，他們的數(shù)字人技術(shù)，在真正的游戲開發(fā)多線環(huán)境下，可以把時間壓到一個月甚至半個月左右。也就是說，NExT的數(shù)字人技術(shù)管線，理論上來講已經(jīng)可以用于實際3A游戲開發(fā)了。

關(guān)于數(shù)字人的硬件和軟件近年來都基本成熟了，很多海外游戲大廠發(fā)現(xiàn)，他們?yōu)樽约旱挠螒蛑谱鹘巧倪^程，其實和電影工業(yè)用數(shù)字技術(shù)創(chuàng)造虛擬人物，本質(zhì)上沒什么區(qū)別。一直堅持探索數(shù)字人領(lǐng)域的，也確實都是和游戲有密切關(guān)聯(lián)的公司。

小諍的前期動捕

Epic今年二月推出了專門創(chuàng)建數(shù)字人的工具M(jìn)etaHuman Creator，創(chuàng)建好的角色，可直接導(dǎo)入到虛幻引擎中。

而前不久關(guān)于英偉達(dá)四月發(fā)布會上“數(shù)字黃仁勛騙過了所有人”的討論，也展示了英偉達(dá)在數(shù)字人技術(shù)上的探索（實際上發(fā)布會上只出現(xiàn)了14秒的數(shù)字黃仁勛）。

游戲開發(fā)史告訴我們，一旦大廠們把一個技術(shù)的工業(yè)管線跑通，很快就會有個人開發(fā)者也能用的套件工具出現(xiàn)——虛幻引擎就是明證，曾經(jīng)復(fù)雜無比的3D場景建模，現(xiàn)在小團(tuán)隊甚至只有一個人的獨立開發(fā)者也能輕松上手開發(fā)。

今天，基于面部捕捉的精細(xì)3D人物建模還是大型游戲獨有。但也許不久之后，我們就能期待，獨立游戲和小團(tuán)隊們開發(fā)的游戲也能低成本地做出有表情、有肢體動作的3D人物來。

不過，數(shù)字人技術(shù)不僅僅可以用于游戲開發(fā)、航天探索，完全可以更加貼近普通人的生活。

有一本挺老的科幻小說，叫《雪崩》，在萬維網(wǎng)誕生2年后的1992年，就預(yù)言了現(xiàn)在我們已經(jīng)每天沉浸其中的網(wǎng)絡(luò)空間。這本書中提出了很多極富預(yù)見性、影響深遠(yuǎn)的概念，其中就有avatar這個概念——我們在網(wǎng)絡(luò)中的虛擬化身，從圖片形式的頭像到會動的QQ秀，再到任天堂的Mii，乃至蘋果的擬我表情，都是人類在不斷追求虛擬化身的真實性。《雪崩》把這條線推到了極致，在那個近未來世界里，人們可以直接把3D形象投影到網(wǎng)絡(luò)中。

Mii——任天堂推出的卡通化身

為什么我們會試圖在一個本就虛擬的環(huán)境中追求avatar的真實性？《雪崩》用一位女主角的親身經(jīng)歷做了解答：這位女性高中時意外懷孕，回到家不敢告訴任何人，裝作冷靜地和家人們吃了飯，沒任何人發(fā)現(xiàn)，直到她的祖母來串門，看到她臉的一瞬間就明白了整件事——“后來我才恍然大悟，大腦能吸收處理數(shù)量驚人的信息，只要它們以適當(dāng)?shù)男问匠霈F(xiàn)就行，比如真人的面孔”。

今年Metaverse的概念突然火的不行（順便一說，這個概念就是首次出現(xiàn)于《雪崩》中），各大公司都給出了自己的理解。離玩家最近的一種解讀，可能是騰訊的“超級數(shù)字場景”，即游戲會在未來打通線上和線下的間隔，與現(xiàn)實產(chǎn)生越來越多的交互。

如果我們哪天真的能進(jìn)入一個現(xiàn)在還很難想象其面貌的超級數(shù)字場景，現(xiàn)有的所有數(shù)字化身肯定都過于蒼白無力，也許只有充滿微表情、肢體動作的3D數(shù)字人才能承擔(dān)起容納我們形象的任務(wù)。從這個角度來說，NExT和小諍都在為超級數(shù)字場景添磚加瓦。

也許在未來的某一天，我們每個人都可以像擁有一個QQ頭像一樣，擁有一個像小諍這樣的數(shù)字化身，在另一個世界，以另一個身體，再次相見。