世界各地的開發者和創作者下載了來自 NVIDIA Research 的最新代碼,以使用 2D 圖像創建令人驚嘆的 3D 場景。
3D 內容創作者紛紛開始使用逆向渲染工具NVIDIA Instant NeRF ,它能夠將靜態圖像變成逼真的 3D 場景。
自今年早些時候首次發布以來,全球已有數萬名開發者下載了 Instant NeRF 的源代碼,使用它渲染出美輪美奐的場景,并在社交媒體上分享精彩的作品。
Instant NeRF 的學術研究于 8 月 8 日至 11 日在溫哥華和線上舉行的 SIGGRAPH 上憑借其對計算機圖形研究的未來發展所做出的貢獻而被評為最佳論文,據悉今年僅有五篇論文入選該獎項,這篇論文也是 NVIDIA 著作者在本次大會上發表的 17 篇論文和研討會論文之一,這些論文涵蓋了神經渲染、3D 模擬、全息技術等主題。
NVIDIA 最近舉行了一次 Instant NeRF 抽獎活動,開發者在分享用該軟件創建的 3D 場景后就有機會贏得高端 NVIDIA GPU。數百人參與了這項活動,發布的 3D 場景作品包括巨石陣等地標性建筑、自家后院,甚至寵物。
以下是幾位使用 Instant NeRF 的創作者:
鏡花水月:Karen X. Cheng 和 James Perlman
來自舊金山的創意總監 Karen X. Cheng 與軟件工程師 James Perlman 合作渲染 3D 場景,以測試 Instant NeRF 的創作極限。
兩人已經使用 Instant NeRF 創造了探索鏡中反射(如上圖所示)和處理多人復雜環境(比如一群人在餐廳里享用拉面)的場景。
Perlman 表示:“該算法本身就是開創性的。能夠以比普通攝影測量技術更高的保真度渲染物理場景已經十分令人震驚,更不用說還能以如此高的精度再現照明、色差等其他細枝末節?!?/p>
Cheng 表示:“它甚至讓錯誤看起來都很藝術。我們太喜歡這一點了,有時我們會減少場景的訓練次數,嘗試 1000 次、5000 次或 50000 次迭代。有時候我更喜歡那些訓練次數少的場景,因為它們的邊緣會更加柔和,就好像油畫一般。”
如果使用之前的工具,需要三到四天才能訓練出一個“質量不錯的場景”。有了 Instant NeRF,他們每天可以完成大約 20 個場景,他們使用 NVIDIA RTX A6000 GPU 來渲染、訓練和預覽其 3D 場景。
快速渲染帶來更快的迭代速度。
Cheng 表示:“快速渲染對整個創作過程非常重要。我們會一起拍攝 15 或 20 個不同的版本,整夜運行,然后查看哪些版本可行。只有當在一天內能夠運行多個場景時,我們發表的所有作品才能被反復拍攝?!?/p>
留下瞬間:Hugues Bruyère
蒙特利爾創意工作室 Dpt. 的合伙人兼創新主管 Hugues Bruyère 每天都在使用 Instant NeRF。
他表示:“3D 捕捉對我來說越來越有吸引力,我可以用它來重構和移動立體圖形,賦予它們更加豐富的意義。”
Bruyère 使用其之前為傳統攝影測量所采集的數據在 Instant NeRF 中渲染 3D 場景,傳統攝影測量主要依賴于無反數碼相機、智能手機、360 攝像機和無人機拍攝的照片。他還使用 NVIDIA GeForce RTX 3090 GPU 渲染 Instant NeRF 場景。
Bruyère 認為 Instant NeRF 可以用來保護和分享在線圖書館、博物館、虛擬現實體驗和文物保護項目中的文化藝術品。
他表示:“隨著相機和軟件解決方案變得越來越便宜,拍攝本身也走向大眾化。在幾個月或幾年內,人們將能夠捕捉物體、地點、時刻和記憶,并以可分享和永久保存的形式對它們進行實時立體渲染?!?/p>
借助智能手機拍攝的照片,Bruyère 為多倫多皇家安大略博物館展覽中的古代大理石宙斯雕像創建了 Instant NeRF 渲染。
步入遙遠的場景:Jonathan Stephens
空間計算公司 EveryPoint 首席布道官 Jonathan Stephens 一直在探索 Instant NeRF 的創作和實際應用。
EveryPoint 重建了堆場、鐵路站場、采石場等 3D 場景來幫助企業管理資源。通過 Instant NeRF,Stephens 可以更加完整地捕捉場景并讓客戶自由探索場景。他還借助 NVIDIA RTX 3080 GPU 運行使用 Instant NeRF 渲染過的場景。
Stephens 表示:“我最喜歡 Instant NeRF 的一點是它讓我能夠迅速知道渲染是否有效。以前,大型攝影測量集可能要等上幾個小時或幾天才能知道結果?,F在我可以測試出一堆不同的數據集并在幾分鐘內得到答案。”
他還嘗試使用智能眼鏡等輕型設備拍攝的畫面制作 NeRF。Instant NeRF 可以將 Stephens 走在街上拍攝的低分辨率、抖動的畫面轉換成流暢的 3D 場景。
審核編輯:湯梓紅
-
3D
+關注
關注
9文章
2863瀏覽量
107336 -
NVIDIA
+關注
關注
14文章
4946瀏覽量
102822 -
gpu
+關注
關注
28文章
4703瀏覽量
128718
原文標題:SIGGRAPH 22 | NVIDIA Instant NeRF贏得SIGGRAPH最佳論文,在成千上萬的下載中激發創意熱潮
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論