英伟达：Connects the tools you use today
with the platform of tomorrow

NVIDIA Omniverse是NVIDIA开发的专为虚拟协作和实时逼真模拟打造的开放式云平台，
通过云赋能创作者、设计师、工程师和艺术家在本地或者超越物理界限的世界各地实时工
作，彼此之间可以实时看到进度和工作效果，提供了极大便利性。Omniverse基于Pixar的
USD（通用场景描述技术），具有高度逼真物理模拟引擎和高性能渲染的能力。
Omniverse包含五个重要组件：Connector、Nucleus、Kit、Simulation、RTX。 

USD是传递场景描述信息的文件格式，主要被用来合成场景和实时解析场景中的数值，并
且USD的API支持复杂属性、分层、延迟加载和多种其他功能。基于USD，NVIDIA想要创
造一个整合各个3D软件平台的3D资产，构建开放式创作和共享平台。

Omniverse的愿景非常符合元宇宙的重要理念之一：“不由单一公司或平台运营，而是由
多方共同参与的、去中心化的方式去运营”。

虚拟老黄与他的虚拟厨房

NVIDIA在2021年8月自爆4月份NVIDIA
发布会上的老黄是虚拟形象，虚拟形象
的演讲时间仅为15秒，而其余均为老黄
本人。

数字黄仁勋的制作：软硬件兼备

为了创造出虚拟的老黄，NVIDIA和一支小型艺术家团队需要运用到3D扫描、动态捕捉、
AI合成等技术，并利用Omniverse平台上的各类渲染技术才能够得以完成。 

NVIDIA团队驾驶着拥有数百个单反相机的大卡车到老黄家，首先对老黄进行3D扫描，拍
摄数千张老黄的照片，为老黄进行建模。 

NVIDIA团队为了让老黄的模型“活”起来，需要对模型的面部表现和身体表现作出精细
的模拟。面部表现由NVIDIA的Audio2Face技术驱动，可以实现依靠音频的面目表现自动
化；在这之上，团队又通过Face Video to Video的技术将老黄的照片映射到上述模型的
CG动画版本上，将皮肤纹理、发质、神态等完整复刻到CG模型上，达到栩栩如生的效果。

在身体表现方面，NVIDIA团队让一位演员穿戴动作捕捉装备，让演员模仿老黄演讲时的
身体动作和姿态并记录下来，通过Audio to Gesture的技术，让身体动作表现依靠演讲时
的音频来变化。 

NVIDIA团队一共做了21个版本的数字老黄，而最后由老黄亲自选择用哪一个版本进行演
讲。在制作并选择出最相似的数字黄仁勋之后，还需要通过CG动画渲染技术，还原一个
“虚拟真实场景”中的老黄。 

整个演讲的厨房场景皆为CG动画效果。团队先在老黄的厨房中以各个角度拍摄了数百张
照片建立一个粗糙的3D模型，再对厨房中数千个物件和数万个零件一一建立虚拟形象，
并通过CG技术拼凑在一起，实现全CG厨房。