在“星際迷航：下一代”的科幻領域中，Holodeck是交互式技術的巔峰之作。機組人員可以將自己沉浸在壽命的3D環境中，從異國風景到歷史城市。
工程師使用高級人工智慧和視頻遊戲資產以重新創建現實世界中的同等產品。
使用chatgpt重新創建《星際迷航》的Holodeck
與Holodeck在其用戶的指揮下的無縫生成環境不同，創建虛擬互動空間實際上是一個勞動密集型的過程，通常需要藝術家的手動設計工作。
該限制對訓練AI系統構成了重大的現實世界環境，構成了重大挑戰，因為它們依靠大量數據集進行有效學習。
為了應對這一挑戰，賓夕法尼亞大學的研究人員與斯坦福大學，華盛頓大學和艾倫人工智能研究所（AI2）的合作夥伴合作開發了“ Holodeck”，該系統能夠使用自然語言命令生成交互式3D環境。
通過利用大型語言模型（LLM）的力量chatgpt，HoloDeck解釋用戶請求並將其轉換為詳細的虛擬環境。
Holodeck的操作背後的過程反映了與AI助手的對話，用戶用語言描述了他們所需的環境。
例如，用戶可能會根據提供的描述要求Holodeck索取舒適的公寓，從而促使Holodeck生成佈局，家具和其他元素。
為了實現這一目標，Holodeck通過利用objaverse（龐大的數字對象存儲庫）來填充虛擬空間。
體現了AI代理
根據研究團隊的主張，Holodeck在一系列評估中展示了其產生現實和連貫的場景的能力，在用戶的偏好和現實主義方面表現出色。
該團隊報告說，與傳統方法相比，參與者始終對Holodeck產生的環境更有利，這突出了該系統創建多樣化和沈浸式虛擬空間的潛力。
此外，Holodeck在訓練中有助於體現AI代理，以有效地駕駛不熟悉的環境。
通過將AI代理暴露於Holodeck產生的各種虛擬空間中，研究人員觀察到了代理在不同情況下的導航能力的顯著改善。
研究人員舉了一個例子，與在手動創建的環境中訓練的人相比，在音樂室接受培訓的代理商顯著提高了成功率。
楊在新聞稿，“這個領域長期以來一直在住宅空間進行研究。”
“但是，那裡有許多不同的環境，有效地產生了許多訓練機器人的環境一直是一個巨大的挑戰，但是Holodeck提供了這種功能。”
該團隊將在2024年的電氣與電子工程師研究所（IEEE）和計算機視覺基金會（CVF）在華盛頓西雅圖舉行的計算機視覺和模式識別（CVPR）會議上介紹Holodeck。
他們的發現是出版在Arxiv上。
