Meta 研究人員在 YouTube 上發布了一段視頻，演示了 Quest 2 虛擬實境耳機在不使用額外感測器的情況下檢測身體運動的可能性：
影片顯示一名男子正在做出動作並傳輸到他的虛擬複製品。頭部和手的位置是使用耳機和控制器上的感測器確定的，但身體其他部位（肘部、軀幹、腿部）的位置通常需要額外的感測器。例如，HTC 提供 Vive 追蹤器，這是一個可以附著在手臂或腿上的小盒子。但你必須支付至少3次139歐元才能進行全身檢測。
Meta 的壯舉是不需要這些額外的感測器，並且能夠使用神經網路來估計身體的位置。正如研究人員在他們的研究中所解釋的那樣出版品:
「我們證明，使用物理模擬可以透過以物理上合理的方式合成尺寸姿勢來補償失去的感測器資訊。 »
因此，神經網路嘗試根據其擁有的數據找到合理的身體位置。在影片中，我們看到虛擬角色的位置並不荒謬，看起來與真實角色的位置非常接近。研究人員表示，所獲得的結果優於由陀螺儀和加速度計組成的 IMU（慣性測量單元）型盒子所能提供的結果。
粗略的方法
如果神經網路計算出的虛擬人物身體的位置是合理的，那麼它並不完全準確，如下面的截圖所示（右手的位置）：
此外，目前的技術具有相當高的延遲：160 毫秒，相當於 72 Hz 下超過 11 幀，但在未來，這可以為 Meta 的軀幹頭像添加腿：
但正如研究人員在其出版物末尾所解釋的那樣，仍有工作要做。例如，模擬的化身可能仍然顯得僵硬且不自然。此外，不同的使用者不具有相同的構建，而目前的計算同等地線性縮放骨架的所有元素：
「未來，我們希望為我們的系統提供有關骨骼和身體形狀的更詳細資訊。 »
最後，研究人員希望增加化身可以模仿的動作的多樣性，以使它們更加真實。
來源 ： 上傳VR
