英偉達展示Instant NeRF:數秒內通過AI技術將2D照片合成為3D場景

近日,英偉達演示了最新的AI技術,在展示的視頻中,一位穿著像Andy Warhol手持舊款寶麗來相機,通過數十張2D照片快速轉換成3D渲染場景。英偉達表示,75年前寶麗來拍攝第一張即時照片的時候,以快速的2D圖像捕捉3D世界是開創性的,而今天AI正做著相反的事情,即幾秒內將一組靜止圖片轉換成3D數字場景。

在這段演示里,英偉達不但展現了自己AI技術的效果,而且致敬了20世紀波普藝術的領袖人物,以及紀念了寶麗來的「即時照片」技術誕生75周年,可謂是一箭三雕,非常有心思。

英偉達展示Instant NeRF:數秒內通過AI技術將2D照片合成為3D場景

英偉達表示,通過一種名為Instant NeRF的工具,也就是「神經輻射場」技術,結合Tensor Cores進行AI加速,可以加快模型訓練和場景渲染的速度,相比競爭對手的實現方法提高了1000倍。「神經輻射場」是由加州大學伯克利分校、加州大學聖地亞哥分校以及Google研究院在2020年開發的一項技術,通過映射不同2D鏡頭的顏色和光線強度生成數據,並結合攝像機位置的數據,然後將這些來自不同位置的圖像連接起來,渲染出一個完整的3D場景。

據英偉達介紹,傳統方法創建3D場景可能需要數小時甚至更長時間,具體取決於可視化的復雜性和解析度。AI技術的引入大大加快了這個過程,基於英偉達開發的「多解析度哈希網格編碼」技術運行在NVIDIA GPU上,讓新的Instant NeRF模型成為迄今為止最快的同類模型之一。英偉達希望Instant NeRF未來可以為虛擬世界創建場景、以3D方式捕捉視頻會議參與者及其環境、為3D數字地圖重建場景,並用於訓練機器人和汽車自動駕駛技術等領域。

來源:超能網