Meta 工程師開發了一款採用 7 nm 製程雕刻的晶片,整合了能夠支援其 Pixel Codec Avatars 技術的神經加速器。足以以比傳統技術更真實的方式即時顯示動畫頭像。只需傳統能源成本的一小部分。
Facebook的母公司Meta集團開發了自己的晶片,以加速其未來虛擬形像在其VR耳機中的即時顯示。事實上,Meta 開發了一種技術,稱為像素編解碼器頭像 (PiCA),無論從影像精度還是動畫角度,都顯著提高了 VR 中人造人臉的自然度。
該系統的第一個版本運行在非常強大的顯示卡(Nvidia Titan X)上,該 GPU 的能耗太高,無法整合到 VR 耳機中。為了在虛擬實境耳機中支援PiCA,該公司的工程師因此開發了特定的晶片。它是一個處理器,整合了帶有 RISC-V 指令集的 CPU、一點內存,最重要的是一個神經網路加速器,負責支援該編解碼器的即時計算。這款僅 2.56 mm² 的晶片採用 7 nm 工藝,專注於其任務(計算空間視場,考慮眼動追踪並生成 PiCA 數據),3D 計算和顯示得到 Quest 2 SoC 的 GPU 的良好支持,用於其初始開發的平台。
如果該晶片是為 PiCA 開發的,那麼其開發則需要徹底重新思考該技術,以充分利用該客製化晶片。該編解碼器很可能由晶片的人工智慧部分支持,就像 Snapdragon 的六角形一樣......但開發這種編解碼器/晶片共生的事實使 Meta 能夠大幅降低能耗,隨後,其科技的熱足跡。
我們順便指出,Meta 利用了相對簡單的晶片(小型 32 位元處理器,只有 2 MB SRAM)的開發優勢來涉足這一領域。RISC-V指令集。這對 ARM 來說顯然是不利的。
來源 :虛擬實境之路