科学家已经为Apple Vision Pro混合现实耳机开发了一个应用程序，可让用户仅使用头部和手势来控制机器人。它可用于在不同的情况下远程控制机器 - 从恶作剧到导航灾区。
该应用程序称为“跟踪流”，跟踪人类的运动，特别是头部，手腕和手指的移动方式 - 并将这些数据通过Wi-Fi连接流到同一网络上的机器人。然后，连接的机器人将数据转换为相应的运动。
研究人员在3月9日发表的一篇简短论文中发表了他们的作品Girub- 开源代码存储库。他们的系统在手和手腕上跟踪26分，头部的单独点。它还记录了空间数据，例如您的地面有多高。
有关的：请不要在开车时不要穿Apple Vision Pro，学习冲动，但是用VR购买咖啡是“令人兴奋的新颖性”
该应用程序的开发人员Younghyo ParkMIT的一名博士生在网站X上发布了一个视频，该网站X（以前称为Twitter）显示了系统中的系统。
在简短的视频剪辑中，研究合着者Gabe Margolis，麻省理工学院的一名研究生，用他的手和身体动作控制一个四足机器人。
🥽是否想使用您的新Apple Vision Pro来控制您的机器人？想记录您如何导航 /操纵世界以训练政策吗？我为Visionos开发了一个可以通过WiFi流式传输您的头 /腕部 /手指动作的应用程序，您可以使用…pic.twitter.com/l5cbeinwwf在任何机器上订阅该应用程序2024年3月9日
玛格利斯（Margolis）表现出手势，以指挥机器人接近封闭的门，用抓手转动手柄并进入。在另一个序列中，他示意机器人拿起塑料垃圾可以盖住并将其扔进垃圾中。在某一时刻，他还弯腰 - 触发了机器人模仿他。
苹果在2024年2月推出了Vision Pro Virtual Reality（VR）耳机，自日常生活中佩戴该设备的人们以来，录像带。推出前不久，科学家发表了研究，研究了如果您在日常生活中使用VR耳机的性能。
他们发现这些设备的时间滞后时间，切断了外围视力，并引起了趣味的磨损扭曲。他们警告不要戴VR耳机在楼下开车或行走时。
Park和Margolis在他们的论文中猜测，某些用户可能一直都在戴Apple Vision Pro，例如眼镜，并且继续使用将提供更多的数据，这些数据可用于教学机器人的移动方式。
