在“星际迷航：下一代”的科幻领域中，Holodeck是交互式技术的巅峰之作。机组人员可以将自己沉浸在寿命的3D环境中，从异国风景到历史城市。
工程师使用高级人工智能和视频游戏资产以重新创建现实世界中的同等产品。
使用chatgpt重新创建《星际迷航》的Holodeck
与Holodeck在其用户的指挥下的无缝生成环境不同，创建虚拟互动空间实际上是一个劳动密集型的过程，通常需要艺术家的手动设计工作。
该限制对训练AI系统构成了重大的现实世界环境，构成了重大挑战，因为它们依靠大量数据集进行有效学习。
为了应对这一挑战，宾夕法尼亚大学的研究人员与斯坦福大学，华盛顿大学和艾伦人工智能研究所（AI2）的合作伙伴合作开发了“ Holodeck”，该系统能够使用自然语言命令生成交互式3D环境。
通过利用大型语言模型（LLM）的力量chatgpt，HoloDeck解释用户请求并将其转换为详细的虚拟环境。
Holodeck的操作背后的过程反映了与AI助手的对话，用户用语言描述了他们所需的环境。
例如，用户可能会根据提供的描述要求Holodeck索取舒适的公寓，从而促使Holodeck生成布局，家具和其他元素。
为了实现这一目标，Holodeck通过利用objaverse（庞大的数字对象存储库）来填充虚拟空间。
体现了AI代理
根据研究团队的主张，Holodeck在一系列评估中展示了其产生现实和连贯的场景的能力，在用户的偏好和现实主义方面表现出色。
该团队报告说，与传统方法相比，参与者始终对Holodeck产生的环境更有利，这突出了该系统创建多样化和沉浸式虚拟空间的潜力。
此外，Holodeck在训练中有助于体现AI代理，以有效地驾驶不熟悉的环境。
通过将AI代理暴露于Holodeck产生的各种虚拟空间中，研究人员观察到了代理在不同情况下的导航能力的显着改善。
研究人员举了一个例子，与在手动创建的环境中训练的人相比，在音乐室接受培训的代理商显着提高了成功率。
杨在新闻稿，“这个领域长期以来一直在住宅空间进行研究。”
“但是，那里有许多不同的环境，有效地产生了许多训练机器人的环境一直是一个巨大的挑战，但是Holodeck提供了这种功能。”
该团队将在2024年的电气与电子工程师研究所（IEEE）和计算机视觉基金会（CVF）在华盛顿西雅图举行的计算机视觉和模式识别（CVPR）会议上介绍Holodeck。
他们的发现是出版在Arxiv上。
