面部識別系統對訓練數據有著無盡的需求。但未經本人同意而使用真人面孔會引發道德和隱私問題。幫助，但即使這些也往往基於真人的生物識別。使用圖形管道生成的面孔，沒有真實數據——例如微軟開源中包含的面孔DigiFace-1M數據集——看起來不夠真實。
如何餵人臉識別機，不小心讓隱私權成為飯菜的一部分？這是研究人員提出的問題伊迪亞普研究所開始用他們的答案來回答專案，“Digi2Real：通過基礎模型彌合合成數據人臉識別中的現實主義差距。”
這項工作引入了一種使用大規模人臉基礎模型的“新穎的真實感遷移框架，旨在增強合成生成的人臉圖像的真實感”。它從 DigiFace-1M 數據集開始，該數據集包含超過一百萬個用於面部識別的不同合成面部圖像。
摘要稱：“通過將圖形管道的可控方面與我們的真實感增強技術相結合，我們生成了大量真實的變化——結合了兩種方法的優點。” “我們的實證評估表明，使用我們增強的數據集訓練的模型顯著提高了超過基線。
生成的 Digi2Real 合成人臉數據集包含 20,000 張獨特的圖像，將真實感傳輸技術應用於從圖形管道中程序生成的身份，“以生成逼真的圖像，這比原始 DigiFace 數據集更有效地訓練人臉識別模型。”
該過程涉及“在嵌入空間內的多個身份圖像之間進行插值”，然後使用預先訓練的弧面模型“從這些插值嵌入中合成身份一致的圖像”。然後，它通過減少中間 CLIP 編碼器空間中的域間隙來進一步增強它們。
“通過將圖形管道的可控特性與我們的真實感增強技術相結合，我們提出了一種創建屬性可控 f 的新方法。研究人員說。他們有數據支持這一點：他們的測試表明，“Digi2Real 數據集的人臉識別性能比 DigiFace 顯著提高，並且比許多其他合成數據集實現了更好的性能。”
這Digi2Real 數據集，包含 20,000 個獨特個體的 399,355 張圖像，是公開可用的。
文章主題
|||||||||
