元研究人员在YouTube上发表了一个视频，该视频显示了任务2虚拟现实耳机检测身体运动而无需使用其他传感器的可能性：
该视频显示了一个男人在虚拟答复中进行动作和传播。得益于头盔和控制器的传感器，头部和手的位置是确定的，但是身体其余部分（肘部，躯干，腿）通常需要其他传感器。例如，HTC提供实时跟踪器，可以固定在手臂或腿部的小盒子。但是，必须至少支付3倍139欧元才能检测到整个身体。
Meta的壮举是在没有这些额外的传感器的情况下进行，并使用神经网络估算身体的位置。正如研究人员在他们的发布：
“我们表明，使用物理学的模拟通过以物理上合理的方式综合尺寸姿势来补偿缺少的传感器信息。 »»»
因此，神经网络试图根据可用数据找到合理的身体位置。在视频中，我们注意到虚拟字符的位置并不荒谬，并且被证明与真实角色的位置非常接近。根据研究人员的说法，所获得的结果优于IMU类型盒（惯性的Meastement单元），包括陀螺仪和加速度计。
大概的方法
如果由神经网络计算出的头像的身体位置是合理的，那么这并不是完全准确的，正如下面的捕获（右手位置）中可以看出：
此外，当前的技术具有相当高的延迟：160毫秒，相当于72 Hz的11张图像。
但是，正如研究人员在出版结束时所解释的那样，仍然有工作。例如，模拟的化身仍然看起来很僵硬且不自然。此外，不同的用户没有相同的肥胖，而当前的计算将骨骼的所有元素都以线性刻度：
“将来，我们希望为我们的系统提供有关骨架和身体形状的更多详细信息。 »»»
最后，研究人员希望增加化身模仿运动的多样性，以使其更加现实。
来源 ： 上传VR
