北京2022年7月21日 /美通社/ -- 近年來(lái)，元宇宙已經(jīng)在影視作品中充分激發(fā)了我們對(duì)未來(lái)的想象力，從《頭號(hào)玩家》到《失控玩家》，我們真實(shí)的感受到了虛擬人所帶來(lái)的神奇魅力。要提供虛實(shí)交融的卓越體驗(yàn)，重點(diǎn)是根據(jù)真實(shí)世界的形象或場(chǎng)景需求生成栩栩如生的虛擬人物。那么，我們要如何感受到元宇宙級(jí)別的虛擬人物體驗(yàn)?zāi)兀?/p>
虛擬人制作有多難？算力成為門(mén)檻
在當(dāng)前的技術(shù)環(huán)境下，虛擬人制作已經(jīng)相對(duì)成熟，通常包括建模、動(dòng)作/表情綁定、動(dòng)畫(huà)內(nèi)容制作、渲染等程序，將物理世界的人物行為投射到虛擬世界中。但是，要實(shí)現(xiàn)虛擬人的實(shí)時(shí)交互，難度就超過(guò)很多人的想象了。
這一難度首先體現(xiàn)在超寫(xiě)實(shí)虛擬人的真實(shí)感渲染，超寫(xiě)實(shí)虛擬人的建模精細(xì)程度、建模材質(zhì)、紋理，對(duì)光照的模擬及真實(shí)感的物理渲染，會(huì)耗費(fèi)巨大的算力與漫長(zhǎng)的時(shí)間。在電影中，虛擬人物的特效渲染通常采用離線渲染的模式，即使有著專(zhuān)業(yè)的圖形工作站集群，其渲染周期往往也需要3-6個(gè)月。以《阿麗塔:戰(zhàn)斗天使》為例，其中阿麗塔高度擬真的視覺(jué)特效令人震撼，這樣以假亂真的渲染效果來(lái)源于巨大的算力消耗。據(jù)統(tǒng)計(jì)，《阿麗塔:戰(zhàn)斗天使》平均每一幀需要100小時(shí)來(lái)渲染，總計(jì)用了4.32億個(gè)小時(shí)的渲染時(shí)間。
另外，虛擬人的高逼真形象，需要更多的細(xì)節(jié)來(lái)展示，如面部、肢體、毛發(fā)、布料、眼睛、口腔等的制作需要多種軟件對(duì)相機(jī)掃描得到的模型進(jìn)行精修和調(diào)整，并形成統(tǒng)一模型，而這個(gè)創(chuàng)建過(guò)程中需要不同的3D軟件，軟件之間的格式兼容過(guò)程中會(huì)遇到很多問(wèn)題。
這還僅僅是一個(gè)虛擬人創(chuàng)建的難題，在未來(lái)的元宇宙世界中，現(xiàn)實(shí)中的每一個(gè)人都會(huì)有虛擬人需求，虛擬人從2D到寫(xiě)實(shí)再到超寫(xiě)實(shí)的過(guò)程中，對(duì)算力的需求也越來(lái)越大，在多虛擬人創(chuàng)建過(guò)程中，需要更大的算力支持。
浪潮信息聯(lián)手NVIDIA讓虛擬人創(chuàng)作變簡(jiǎn)單
為滿(mǎn)足元宇宙世界虛擬人創(chuàng)建的需求，浪潮信息與NVIDIA強(qiáng)強(qiáng)聯(lián)手，基于業(yè)內(nèi)首款元宇宙服務(wù)器 MetaEngine和NVIDIA Omniverse Enterprise開(kāi)發(fā)套裝推出了具備統(tǒng)一多軟件格式、支持多人協(xié)作、支持實(shí)時(shí)驅(qū)動(dòng)和實(shí)時(shí)光線追蹤渲染的虛擬人解決方案，讓虛擬人內(nèi)容制作由難變易.
在硬件上，MetaEngine采用浪潮信息領(lǐng)先的異構(gòu)加速服務(wù)器旗艦系統(tǒng)，集成NVIDIA A40專(zhuān)業(yè)GPU、CX6 Dx高速網(wǎng)卡等硬件，具有強(qiáng)大的RDMA通信和數(shù)據(jù)存儲(chǔ)能力，支持強(qiáng)大的渲染和AI計(jì)算能力，可幫助用戶(hù)構(gòu)建一個(gè)端到端、生態(tài)豐富和高易用的協(xié)作平臺(tái)。單臺(tái)MetaEngine可支持256位元宇宙架構(gòu)師協(xié)同創(chuàng)作，每秒AIGC 2000個(gè)數(shù)字場(chǎng)景，1000位VR/AR用戶(hù)共享10K超高清3D數(shù)字世界順暢體驗(yàn)，實(shí)現(xiàn)"創(chuàng)所未見(jiàn)"的效果。
在軟件方面，NVIDIA Omniverse Enterprise提供了3D實(shí)時(shí)模擬和協(xié)作的工具及平臺(tái)。3D建模軟件，如MAYA、3ds MAX、Unreal Engine等，團(tuán)隊(duì)成員可以實(shí)時(shí)在線編輯虛擬人模型，改變傳統(tǒng)的串行協(xié)作流程，極大提高工作效率。作為專(zhuān)為虛擬協(xié)作和物理屬性準(zhǔn)確的實(shí)時(shí)模擬打造的開(kāi)放式平臺(tái)，結(jié)合了高性能 GPU 加速計(jì)算、圖形處理和 AI 并配備了高速存儲(chǔ)訪問(wèn)、低延遲網(wǎng)絡(luò)、精確計(jì)時(shí)，具備創(chuàng)建逼真數(shù)字孿生所需的性能。
同時(shí)，浪潮MetaEngine- NVIDIA OVX方案提供的Audio2face、Machinima等軟件，用AI算法輕松驅(qū)動(dòng)虛擬數(shù)字人，可實(shí)現(xiàn)實(shí)時(shí)的視頻音頻驅(qū)動(dòng)人臉表情及肢體動(dòng)作，真正做到"所動(dòng)即所見(jiàn)"。而為了獲得科幻大片級(jí)的逼真光影效果，方案集成Tensor core/RT core的算力，配合渲染、實(shí)時(shí)光追、AI降噪SDKs，實(shí)現(xiàn)實(shí)時(shí)光線追蹤渲染。
MetaEngine還整合了浪潮"源"大模型的能力，浪潮"源"大模型具備2457億參數(shù)，具備知識(shí)問(wèn)答、多輪對(duì)話(huà)、中英翻譯、寫(xiě)作古詩(shī)等零樣本或少樣本的推理能力，可以讓虛擬人不僅擁有逼真的外觀，還可以像人類(lèi)一樣進(jìn)行文本等內(nèi)容創(chuàng)作。而對(duì)于浪潮"源"需要多GPU計(jì)算設(shè)備協(xié)同工作的問(wèn)題，將通過(guò)浪潮AIStation智能業(yè)務(wù)創(chuàng)新生產(chǎn)平臺(tái)實(shí)現(xiàn)多計(jì)算資源的智能調(diào)度管理，保證模型服務(wù)的高吞吐、低延遲。
所見(jiàn)即所得 MetaEngine-OVX的"點(diǎn)泥成人"術(shù)
那么，如何通過(guò)浪潮MetaEngine - NVIDIA OVX方案加速虛擬人的創(chuàng)建，打造"所見(jiàn)即所得"的元宇宙世界呢？
首先，設(shè)計(jì)師可以借助MetaEngine所集成的NVIDIA Omniverse Enterprise，搭建統(tǒng)一協(xié)作空間。設(shè)計(jì)師可以根據(jù)人物特征與場(chǎng)景需求建立虛擬人模型，并進(jìn)行貼圖、渲染，依托MetaEngine強(qiáng)大的算力生成栩栩如生的模型，或者可以直接通過(guò)Omniverse下載自己想要的虛擬人形象。
要做到虛擬人與真實(shí)世界的交互，僅有虛擬形象還不夠，還需要讓虛擬形象進(jìn)行生動(dòng)形象的展示，這包括對(duì)其面部表情、肢體動(dòng)作的完美驅(qū)動(dòng)，對(duì)場(chǎng)景及虛擬形象進(jìn)行實(shí)時(shí)渲染，讓靜止的虛擬人"動(dòng)"起來(lái)。
MetaEngine與NVIDIA Omniverse Enterprise的強(qiáng)大組合支持虛擬人快速創(chuàng)建，通過(guò)導(dǎo)入場(chǎng)景和使用machinima 3D Pose Track實(shí)時(shí)驅(qū)動(dòng)的數(shù)字人骨骼點(diǎn)信息，將骨骼點(diǎn)動(dòng)作重定向到數(shù)字人資產(chǎn)，快速創(chuàng)建虛擬人動(dòng)畫(huà)，創(chuàng)建3D內(nèi)容。
浪潮AIStation智能業(yè)務(wù)創(chuàng)新生產(chǎn)平臺(tái)部署管理浪潮 源及語(yǔ)音模型，結(jié)合浪潮MetaEngine-NVIDIA OVX方案的Audio2face功能，可以實(shí)時(shí)將浪潮"源"的推理結(jié)果，轉(zhuǎn)化為語(yǔ)音，語(yǔ)音驅(qū)動(dòng)數(shù)字人面部產(chǎn)生逼真的表情及面部動(dòng)作，讓對(duì)話(huà)及交互更加真實(shí)、自然。
MetaEngine將高性能圖形計(jì)算、AI計(jì)算與高速存儲(chǔ)訪問(wèn)、低延遲網(wǎng)絡(luò)和精確計(jì)時(shí)相結(jié)合，專(zhuān)用于為大規(guī)模數(shù)字創(chuàng)景制作提供算力和應(yīng)用支持，以實(shí)時(shí)創(chuàng)建和運(yùn)行復(fù)雜的3D場(chǎng)景和逼真的物理仿真環(huán)境，讓基于物理的高逼真實(shí)時(shí)渲染成為可能，滿(mǎn)足元宇宙的互動(dòng)需求。
7月27日，浪潮信息將聯(lián)合NVIDIA共同揭秘如何使用聯(lián)合方案制作虛擬人的過(guò)程，歡迎大家關(guān)注。
