在蒙特利尔举行的人工智能展会上,英伟达大秀实力,宣布泰坦 RTX,一款横跨游戏玩家世界以及创意专业人士、人工智能研究人员等世界的显卡。
此次,设计师还为视频游戏、汽车路线模拟等虚拟应用展示了一种为超现实环境建模的新方法,令人惊叹不已。目前正在开发中,但初步结果非常令人鼓舞。
绘制、识别和应用
简而言之,它涉及利用神经网络的计算能力来创建真实的城市模型。为了实现这一目标,英伟达研究人员使用了行车记录仪(车载摄像头)捕获的数据,这些行车记录仪安装在行驶于美国城市社区的汽车中。然后,他们在使用视频游戏引擎 Unreal Engine 4 以 3D 形式再现的拍摄环境复制品的三维骨架(彩色语义图)上进行建模。
一切都是实时生成的,具体取决于模拟核心的用户动作,并且得益于 Tensor Core(芯片上专用于 AI 的单元)的强大功能。沃尔特V100或那些基于图灵架构显卡GeForce RTX和其他人Quadro RTX。
当然,为了让魔法发挥作用,我们仍然必须帮助人工智能识别“谁是谁”。因此,Nvidia 研究人员定义了哪些类型/组的像素对应于车辆、建筑物、道路、树木、行人等。在虚幻引擎的3D环境中。
然后,经过训练并能够识别这些元素的人工智能将视频中发现的模型复制到 3D 对象上,从而以非常令人信服的方式再现了行车记录仪拍摄的。或者,如果做不到这一点,就可以毫无问题地动态调整和插入本来可以存在的元素。
如果视频清楚地表明渲染质量还达不到 AAA 3D 游戏的水平,甚至还达不到现实的精确再现,那么仍然必须认识到两个城市环境之间的相似性非常惊人。事实上,一切都是实时计算和执行的,这使得它更加令人印象深刻。
如视频的第二部分所示,还可以创建深度造假这种技术非常有说服力。因此,我们看到的研究人员再现了舞蹈编排的动作江南style是人工智能的纯粹创造,经过训练可以分析人们随着音乐摇摆的视频和手势,然后应用于看似真实的位置中的人的超现实 3D 模型。谨防分道扬镳。
来源 :
英伟达