今年4月24日中国航天日,新华社正式对外发布“数字航天员”计划,用计算机图形和人工智能技术打造中国第一位数字记者和全球首位数字航天员“小诤”。腾讯互娱旗下NExT Studios作为技术战略合作伙伴,为数字航天员的制作提供技术支持,助力完成此次主流价值观虚拟偶像的塑造任务。
11月7日,恰逢新华社成立90周年,包括UE5 Nanite和Lumen的新特性、五面屏沉浸式展示、原创火星车、航天服、火星场景等内容的最新预告片同期发布,数字航天员在火星为国社庆祝生日快乐,也展示了背后技术团队大型写实场景的打造与渲染的能力。
之前我们提到,数字航天员这样的合作其实代表了游戏技术可以单独跨界创造多元化价值,而不拘泥于游戏产品本身。这种更下沉更底层的合作突破了以往的限制,为游戏多元化价值的探索带来更多方向上的可能。
而这种合作成立的背后,也是源自当下各行各业与时俱进、对于数字技术运用的普遍的需求。对于新华社而言,选择内容创新与技术创新、渠道创新融合发展,这是把握新媒体融合生产的精髓。“数字航天员”计划中,游戏技术的运用是为航天科普最终更好的效果服务。而对于NExT Studios以及背后的游戏行业,跨界合作除了探索多元化价值的上层目标,也是游戏团队对于技术的一次跨界演武试炼,获得宝贵的经验积累,为日后更多项目的打好基础。
1
新华社的前身为红色中华通讯社,1931年11月7日在江西瑞金成立,是中国共产党领导下成立最早的新闻机构。1937年1月,为适应革命斗争形势的需要,根据中央的决定,在延安更名为新华通讯社。
成立90周年之际,正如其所言“90年后,国家通讯社正年轻,向着5G、人工智能、云计算、空间信息技术、先进计算机图形技术构筑的新宇宙出发!”新媒体融合生产的精髓和要义在于,把控内容质量的同时,内容创新需要与技术创新、渠道创新融合发展,与时俱进。
因此我们也能看到,官媒们在各个新平台和渠道积极开拓,引入更多技术探索更多表现形式,保持年轻活力、“接地气”地走进用户群体。在这其中,更多新技术和新形式的引入运用,本质上还是为传播的效果服务。
正如本次“数字航天员”计划,用计算机图形和人工智能技术打造中国第一位数字记者和全球首位数字航天员“小诤”。2021年,中国航天除“天问一号”火星探测任务完成火星登陆外,也已转入空间站在轨建设任务阶段,迎来“天宫”空间站。数字航天员将出现在上述项目中,并在从太空到地面的多个虚实结合、全数字环境开展多样化的运营尝试。
作为国内首个多环境运营的超写实数字人项目,成为连接中国航天精神和年轻一代人群的桥梁。
游戏技术跨界创造多元价值的前提是,合作双方有着志同道合的诉求。对于媒体报道,将新兴数字技术引入新闻生产,以更多表现形式有效拓展场景,实现技术、内容和创意的融合迭代, 为用户提供更容易接受的表现形式,进而实现更好的传播效果。
2
根据信息,新华社媒体融合生产技术与系统国家重点实验室组织实施整个数字航天员项目。作为行业领先的技术和科研探索,项目要点主要包括:超写实数字人形象的塑造;合成语音等数字人相关技术的集成;多场景数字人资产的运用;多模态人机交互体系的构建和知识图谱的构建;超大规模可交互开放数字场景的建设。其中,前三项已在2021年全面展开并制作了数十分钟媒体产品,最后两项也已开展了前期工作。
作为腾讯游戏旗下最重要的研发部门,NExT Studios承担了核心的超写实数字航天员塑造工作,以及此次预告片所展示的超大数字场景建设。
值得注意的是,在此之前,我们关注的重点在于虚拟人技术上,无论是Project Siren、Matt AI还是人脸制作管线xFaceBuilder®和动画生产管线xMoCap®的技术,都是围绕高保真数字虚拟人领域展开,也是NExT Studios参与此次项目的关键。
作为国家通讯社,新华社面对中国社会生产生活的方方面面,是名副其实的社会超级连接者。而NExT Studios——其实也包括整个腾讯公司,也中国最强大的数字技术拥有者。
这种合作不仅是一个展示游戏技术前沿应用的良好契机,更是一个真正实现游戏技术向整个社会迁移和扩散的实践。
例如最新预告片中提到,过去每生成一帧这样的画面,都要几十个小时。但现在,实时渲染技术大幅度提升了制作的效率,而且云计算和人工智能允许大量的实时交互的可能。“小诤”实际演示了捡起地上的一块石头,打碎另外一堆石头的场景。
这些演示丰富航天科普效果的同时,也让用户更加明确直观了解到游戏技术对于整个社会生活的意义和想象。
根据团队介绍,该项目开发中运用了UE5 Nanite和Lumen等引擎特性,并支持空间音频(Spatial Audio)技术。
事实上,这一“新宇宙”演示,针对新华社“新立方”沉浸式体验空间打造的、面向下一代互联网平台的探索尝试。也就是人们称之为3D互联网或元宇宙的未来目标。
受制于相关硬件还没有普及,因此剪辑成为普通视频版本。目前,VR版本正在制作之中。
这一预告片有着耐人寻味的情节。当然,其核心在于超大规模写实场景的打造与渲染能力的体现。通过UE5的Lumen和Nanite系统,可以加快游戏速度并减少优化模型(如 LOD、烘焙等)的时间。Nanite是一个虚拟化的几何系统,可以在场景中具有高多边形网格。而Lumen的主要特点是无需硬件光线追踪支持,也可以支持实时的全动态GI,无需预先烘焙,对室内外场景均可以达到较好的细节质量与性能的平衡,且与Nanite可以无缝配合。
然后,正如片尾“打开新宇宙”的预告一样,从虚拟人到超大规模写实场景打造,NExT Studios其实都是在“超级数字场景”的原则指导下,推动未来用户更加沉浸的进入虚拟数字场景。角色和场景都是不可或缺的部分,NExT Studios正在逐步向外展示这方面的能力。
在人类的历史上,商业和战争是推动社会变革的两大因素。如今,来自于数字文化的技术开始向社会肌体渗透。它是否会成为第三种推动社会变革的决定性技术?这取决于这种技术是否能够更广泛的与社会生活的各方面实现有限连接和迁移。NExT Studios、腾讯公司通过与新华社的合作,给出了自己的模式。