虛擬宇宙的概念並不是什麼新鮮事，但它似乎是新的數位黃金國，將填滿我們的白天，陪伴我們的夜晚。科技巨頭正在解決這個問題，並消除技術限制，使其更加現實。因此，Nvidia 開發了一種能夠每秒生成超過 20 個逼真 3D 物件的 AI…
這個科技星球幾乎一無所有，只剩下這個字：「元宇宙」。 Facebook 更名為 Meta，是為了表明馬克祖克柏的公司對這個虛擬世界的重視程度，這個虛擬世界為我們帶來了許多奇蹟。
無論如何，顯然還有其他科技公司在虛擬宇宙上投入了大量資金。從邏輯上講，Nvidia 就是其中之一，因為 Jensen Huang 的公司生產顯示卡，處於 3D 領域的前沿，並且已經致力於開發專用工具一段時間了。受洗全方位宇宙目前主要面向專業人士，但當然也不排除一般大眾，正如上週GTC開幕前各公司發言人提醒我們的。
繁殖、生長和繁殖…
考慮到英偉達面臨的挑戰，聖克拉拉公司在該領域的大力投資也就不足為奇了。其投資成果最近取得了令人印象深刻的轉變，可以大大促進用戶沉浸在這個未來的虛擬世界中。
對於任何玩過 MMORPG 甚至《第二人生》的人來說，很明顯，虛擬宇宙的主要挑戰之一是角色、動物，有時甚至是各種無生命物體的存在。然而，對 3D 物件進行建模既昂貴又耗時。
毫無疑問，這就是為什麼英偉達研究院的工程師們承擔了一項看似簡單但實際上很複雜的任務：開發能夠“用 3D 物件和角色填充虛擬世界”。
為此，他們創建了 GET3D：這是 AI 的名稱，它來自於生成紋理 3D 網格的能力 - 生成顯式紋理 3D。它能夠產生可直接由3D引擎使用的3D渲染。更好的是，與先前為此類任務開發的模型不同，GET3D 成功地產生了幾何細節的 3D 元素，同時產生了高品質的紋理。
最令人印象深刻的是，所使用的生成對抗網路（GAN）能夠從簡單的合成影像中獲得這些結果。換句話說，人工智慧能夠從二維圖像生成 3D 物體。這對於椅子、房子或狗都同樣有效。通常，人工智慧需要從多個角度拍攝物件的照片，然後才能產生 3D 渲染。這花費了更多時間並限制了此類工具的潛力。
但對於 GET3D，這種限制似乎已成為歷史。更好的是，用於訓練神經網路的資料集越多樣化（例如許多狗品種的照片），它能夠產生的 3D 結果就越不同。因此，如果用汽車圖像進行訓練，它將能夠產生豪華轎車、轎車、皮卡車等的 3D 渲染圖。
據 Nvidia 稱，GET3D 能夠使用單一 Nvidia GPU 每秒生成多達 20 個形狀。然後它就起作用了“就好像它是 2D 影像的生成對抗網絡，同時它生成 3D 物件”，該公司在一篇部落格文章中解釋道。同樣，聖克拉拉公司強調，只花了兩天時間和一百萬張圖像來訓練演算法。
英偉達的想法又大又遠。他希望他的 GET3D 能夠成為 3D 內容生產鏈的一部分。因此，由該 AI 創建的模型可以匯入 3D 檔案編輯工具中，然後可以輕鬆修改（從形狀到建議的紋理）。
還可以匯出檔案並向其應用逼真的燈光效果，例如，當相機圍繞其旋轉時，該物件看起來比實際的要大。
透過使用 Nvidia Research 開發的另一種工具（稱為 StyleGAN-NADA），還可以走得更遠。使用關鍵字，圖形設計師可以修改物件的外觀。例如，將汽車的 3D 渲染變成計程車或燒毀的殘骸。
短期內…
在不久的將來，開發 GET3D 的研究人員相信，可以直接用於真實照片。這意味著人工智慧將能夠推斷拍攝資訊來確定被拍攝物體的 3D 形狀。
更好的是，雖然目前 GET3D 必須針對每種類型的物體或動物進行單獨訓練，但很快就可以同時向其提交汽車、狗、貓、人、船等的照片。所有這些都將立即被攝取，然後人工智慧將能夠生產每個類別的物件。再次，實時節省時間，並且可以更快地填充虛擬宇宙。
因此，明天，我們對虛擬世界的訪問將更加現實，或至少更加充滿我們周圍並構成我們日常生活的眾多小事。您將能夠進入一間裝飾得像真實房間一樣的房間。它甚至可能是您公寓的“數位雙胞胎”，但擁有您夢想中的四柱床……您想知道哪一個是最好的？由於你在虛擬宇宙中仍然沒有腿，所以當你早上起床時，你的大腳趾不可能撞到踏板。當我們告訴你虛擬宇宙就是未來時...
來源 ： 英偉達博客
