Meta 工程师开发了一款采用 7 nm 工艺雕刻的芯片,集成了能够支持其 Pixel Codec Avatars 技术的神经加速器。足以以比传统技术更加真实的方式实时显示动画头像。只需传统能源成本的一小部分。
Facebook的母公司Meta集团开发了自己的芯片,以加速其未来虚拟形象在其VR耳机中的实时显示。事实上,Meta 开发了一种技术,称为像素编解码器头像 (PiCA),无论从图像精度还是动画角度,都显着提高了 VR 中人造人脸的自然度。
该系统的第一个版本运行在非常强大的显卡(Nvidia Titan X)上,该 GPU 的能耗太高,无法集成到 VR 耳机中。为了在虚拟现实耳机中支持PiCA,该公司的工程师因此开发了一种特定的芯片。它是一个处理器,集成了带有 RISC-V 指令集的 CPU、一点内存,最重要的是一个神经网络加速器,负责支持该编解码器的实时计算。这款仅 2.56 mm² 的芯片采用 7 nm 工艺,专注于其任务(计算空间视场,考虑眼动追踪并生成 PiCA 数据),3D 计算和显示得到 Quest 2 SoC 的 GPU 的良好支持,用于其初始开发的平台。
如果该芯片是为 PiCA 开发的,那么其开发则需要彻底重新思考该技术,以充分利用该定制芯片。该编解码器很可能由芯片的人工智能部分支持,就像 Snapdragon 的六角形一样......但开发这种编解码器/芯片共生的事实使 Meta 能够大幅降低能耗,随后,其技术的热足迹。
我们顺便指出,Meta 利用了相对简单的芯片(小型 32 位处理器,只有 2 MB SRAM)的开发优势来涉足这一领域。RISC-V指令集。这对 ARM 来说显然是不利的。
来源 :虚拟现实之路