视频：InfoComm China 2024 现场
现在，绿幕技术也可以结合当下“黑科技”，进行虚拟拍摄，并且现场实时合成出片，实现蜕变与新生！
却月数字科技（上海）有限公司（简称“却月数字”）是一家专注于虚拟制片技术研发和项目制作的企业，在绿幕拍摄方面也有相当丰富的经验。在打造短视频和影视项目的创作过程中，他们将 NVIDIA Omniverse™ 平台和 NVIDIA RTX™ 技术融合到现有工作流中，打破了原来线性流程的束缚，实现了绿幕虚拟拍摄实时出片。
打破结界，
让创作扎根于“现实”
全套流程分别采用了却月数字的虚拟拍摄系统、搭载 2 张 NVIDIA RTX™ 5880 Ada 架构显卡的丽台图形工作站 WinFast WS2040 以及 NVIDIA Omniverse 平台。
▲ 现场拍摄流程图
相机拍摄的现场画面将通过抠像器实时处理后，接入 Omniverse 平台，然后直接合成实拍与虚拟场景结合的最终画面。在实时渲染场景中，还能同时对 3D 场景、人物在虚拟场景的位置等进行调整，这样即使在绿幕的背景下，也可以实现人物和场景的交互，辅助团队完成创意工作，打破传统绿幕给创作和表演带来的结界，实现了影视制作流程中的 3D 实时协同设计。
NVIDIA Omniverse：
将光影数字世界呈现在眼前
当下很多影视片段往往因其极不真实感引人吐槽，现代化视觉效果的核心是创建逼真、可实时操作的数字布景和环境，这样能够提高整体画面的质感，保证影视作品的质量。
NVIDIA Omniverse 是基于通用场景描述（OpenUSD）框架构建的可扩展平台，由应用编程接口（API）和软件开发套件（SDK）组成，能够连接和自定义 3D 工作流、模拟物理级精确的虚拟世界。
NVIDIA Omniverse™ USD Composer（以前称为 Create）是 NVIDIA Omniverse 中用于构建虚拟世界的参考应用程序，允许用户进行组装、模拟和渲染大型场景。本次使用的古风场景就是在 Omniverse USD Composer 中全流程打造的。
▲ Omniverse 场景预览
打破壁垒，OpenUSD 实现资产互通和交换
OpenUSD 即通用场景描述，在 Omniverse 中可以进行合成、模拟和协作 3D 世界。Omniverse 中包含丰富的材质库和可用资产，在该场景的制作过程中，70% 的元素和资产均引用自 Omniverse，剩余 30% 的部分通过 NVIDIA Omniverse™ Connector 将外部资产转换为 USD 格式，再进行导入，在 Omniverse 中实现了资产互通，从而可以快速整合所需资产，完成前期布景搭建。OpenUSD 作为一个数字内容创建工具之间的通用语言，让这一切变得快速而简单。
虚实相生，Omniverse 精确还原古代场景
Omniverse USD Composer 是 Omniverse 平台的一个基础应用，能够帮助 3D 用户组装基于 OpenUSD 的大型场景，进行复制、扩展和增强。USD Composer 内置 RTX 渲染器，利用逼真的光线、阴影和纹理元素，以及实时光线追踪技术，能够渲染出极具真实感古代场景。场景内饰有大量古代风格的家具与壁画，光影交错，营造出温暖昏暗的色调，再配合现场环境的灯光，演员与场景相融合，仿佛置身于古代文明的精华之中。
除此之外，该场景中还使用了 Omniverse 中集成的 NVIDIA PhysX 物理模拟功能，在场景中可以轻松地添加逼真的火焰、粒子效果，这种基于物理的模拟，使得画面更加的细腻和真实。当然，除了这个之外，Omniverse 还能够精确模拟液体、布料、刚体、烟雾、破坏和断裂等等现象，非常适合影视片段中的特效制作。
后期前置，现场合成实现所拍即所得
通过现场摄像机画面进行抠像后传输至 Omniverse，再与古代场景进行现场实时合成，这样，能够实现前期拍摄即最终效果，也就是后期前置。现场的演员与 3D 虚拟背景融为一体，实时显示在监视器中，主创人员能够随时看到效果镜头，并确保符合预期。
▲ 绿幕虚拟拍摄现场
因为“实时”，不仅能在拍摄现场看到最终画面，还能随时做出修改和调整；因为“实时”，团队所有成员能够同时在线协作，大大缩短了拍摄和制作周期。
NVIDIA RTX：
为迅速出片注入源源不断的动力
NVIDIA RTX 技术自推出以来，一直提供实时光线追踪以及高性能的加速功能，借助搭载了 2 张 NVIDIA RTX 5880 Ada Generation GPU 的丽台 LEADTEK WinFast WS2040 工作站，能够流畅运行 Omniverse 打造的大型 3D 虚拟场景。
RTX 5880 Ada GPU 是 NVIDIA Ada Lovelace 架构中的高端产品，搭载 110 个第三代 RT Core、440 个第四代 Tensor Core、14080 个 CUDA® Core 核心和 48GB 大显存，在渲染、AI、图形和计算工作负载性能方面表现卓越，能够提供影视制片所需的算力，提升内容制作的效率。同时，RTX 5880 Ada 还支持 NVIDIA DLSS 帧生成（Frame Generation）技术，在 Omniverse USD Composer 中开启帧生成功能，能大幅增益实时渲染的效率。
▲ NVIDIA RTX 5880 Ada Generation
影视行业是造梦的艺术。数字技术的不断革新，正在深刻地改变着影视行业的生产方式和创作观念。Omniverse 是一个令人激动的创新平台，通过颠覆性的创意工具和实时协作功能，彻底转变了传统的内容制作流程。这一平台不仅极大提升了生产效率和创作者的灵活性，而且通过提供开放的 API 和 SDK，赋予了开发者进行个性化开发的空间，从而推动了数字技术在电影和电视制作行业的进步与创新。
却月数字公司简介
却月数字科技（上海）有限公司 2019 年成立，是一家具备全套虚拟制片解决方案的技术公司。业务范围包括基于虚幻引擎的视觉表现、硬件研发，软件设计与制作。核心团队在数字娱乐行业平均从业时间为 17 年。
核心团队从 2009 年起，已经开始着手于高品质可视化互动设计的研发与推广，作为基于虚幻引擎可视化虚拟互动设计的领航者，开拓众多实时交互领域的行业标准，开启行业先河并以优秀的作品与新颖的交互手法赢得众多客户的认可。
与NVIDIA产品相关的图片或视频（完整或部分）的版权均归NVIDIA Corporation所有。
