在蒙特婁舉行的人工智慧展會上,英偉達大秀實力,宣布泰坦 RTX,一款橫跨遊戲玩家世界以及創意專業人士、人工智慧研究人員等世界的顯示卡。
這次,設計師也為電玩遊戲、汽車路線模擬等虛擬應用展示了一種為超現實環境建模的新方法,令人驚嘆不已。目前正在開發中,但初步結果非常令人鼓舞。
繪製、識別和應用
簡而言之,它涉及利用神經網路的運算能力來創建真實的城市模型。為了實現這一目標,英偉達研究人員使用了行車記錄器(車載攝影機)捕獲的數據,這些行車記錄器安裝在行駛於美國城市社區的汽車中。然後,他們在使用電玩引擎 Unreal Engine 4 以 3D 形式再現的拍攝環境複製品的三維骨架(彩色語義圖)上進行建模。
一切都是即時產生的,取決於模擬核心的使用者動作,並且得益於 Tensor Core(晶片上專用於 AI 的單元)的強大功能。沃特V100或那些基於圖靈架構顯示卡GeForce RTX和其他人Quadro RTX。
當然,為了讓魔法發揮作用,我們仍然必須幫助人工智慧識別「誰是誰」。因此,Nvidia 研究人員定義了哪些類型/群體的像素對應於車輛、建築物、道路、樹木、行人等。在虛幻引擎的3D環境中。
然後,經過訓練並能夠識別這些元素的人工智慧將影片中發現的模型複製到 3D 物件上,從而以非常令人信服的方式再現了行車記錄儀拍攝的。或者,如果做不到這一點,就可以毫無問題地動態調整和插入本來可以存在的元素。
如果影片清楚地表明渲染品質還達不到 AAA 3D 遊戲的水平,甚至還達不到現實的精確再現,那麼仍然必須認識到兩個城市環境之間的相似性非常驚人。事實上,一切都是即時計算和執行的,這使得它更加令人印象深刻。
如影片的第二部分所示,也可以創建深度造假這種技術非常有說服力。因此,我們看到的研究人員再現了舞蹈編排的動作江南style是人工智慧的純粹創造,經過訓練可以分析人們隨著音樂搖擺的視頻和手勢,然後應用於看似真實的位置中的人的超現實 3D 模型。謹防分道揚鑣。
來源 :
英偉達