Nvidia 演示了利用 AI 而不是传统的建模或图形渲染引擎去实时绘制虚拟世界。新的方法利用了条件生成神经网络去分析现有的视频,然后将 3D 元素应用到新的环境里。Nvidia 称这项技术大大简化了 3D 虚拟世界的创造,因为通过视频训练的 AI 能自动将建筑物、汽车、树木等元素渲染到新 3D 世界里,不再需要艰苦的场景元素建模过程。如图所示,AI 生成的视频不是太清晰,其优点在于实时生成。
研究人员发布了一则视频(YouTube)演示了 AI 视频渲染和场景替换(将研究人员自己的肖像替换原视频中的人物)。