跳到主要內容

NVIDIA 新工具 Neuralangelo:2D 影片轉換為 3D 模型

Nivida Neuralangelo:從 2D 影片直接 3D 建模

NVIDIA 發表了驚人 AI 模型,名為 Neuralangelo。這個突破性的工具能使用2D 影片將物件轉換為 3D 模型,為其注入生命。聽起來像是遙不可及的科幻劇情?Neuralangelo 無論是復古雕塑還是我們日常的建築和車輛,都可以將它們再現為 3D 複製品,結果無疑令人驚嘆。


這個技術原理首先是從 2D 影片中選擇不同的畫面,每一個畫面都從不同的角度拍攝物體。這確保了 AI 可以全面了解物體的深度、大小和形狀。然後,Neuralangelo 草擬出物件的初步 3D 樣貌,並逐步優化它,直到它精確地反映出真實物件的細節。


技術混搭:兩全其美

Neuralangelo 從其前身 Instant NeRF 的技術中吸取,可以忠實地捕捉我們希望在 3D 中呈現物件的最細微差別。從紋理和圖案到顏色變化,該模型應有盡有。NVIDIA 自豪地說,Neuralangelo 捕捉棘手紋理的能力,無論是屋頂瓦片的崎嶇還是大理石的光滑,都"大大超越了先前的方法"。


更重要的是,這個 AI 似乎不需要高階設備就能施展其魔法。它能夠從普通智慧手機拍攝的影片中建立出可行的 3D 物件。這一功能為世界各地的創作者開放了大門,讓他們可以輕鬆生成 3D 版本的視覺效果。而且它也很快,,根據 NVIDIA 的說法,Neuralangelo 可以在兩小時內完成 3D 建模。


Neuralangelo 的潛力:想像力將是我們的天花板

Neuralangelo 的論文共同作者 Ming-Yu Liu 表示,未來開發者可以將精緻的物件,無論其大小,導入到遊戲或數位化工業虛擬環境中。NVIDIA 的宣傳影片展示了這項技術從無人機拍攝的影片中製作大型景觀的能力,簡化了希望在遊戲中重現真實世界地點的開發者困惱。


但 Neuralangelo 的可能應用不只如此。這項技術在各種領域,從機器人技術和虛擬實境建築和藝術,都有提升的可能,潛在應用的範圍十分廣。


結論:未來即將到來

小編一直在想像,生成式 AI VR MMORPG 的到來。有類似真實世界的建模,角色技能由玩家開麥克風 “念咒”,由 AI 即時生成 ”魔法”,也可以念咒產生合成獸。配合動作捕捉技術,也可以”結手印”,啟動遊戲 AI 生成相對應的 ”忍術”,Neuralangelo 將是建立真實世界模型的第一步,真的是相當期待未來的到來!


Read more


參考資料

留言

這個網誌中的熱門文章

Reddit 超強文章:使用 ChatGPT 的 Custom Instruction 提升回答品質

ChatGPT 的 GPTs 筆記 (4):GPTs Konwledge 知識庫的限制與風險

Glarity Chrome 擴充套件:使用 ChatGPT 生成 Youtube/bilibili, Google/Bing, Page Summary, Comment Summary 摘要

Forefront Chat:自由切換 GPT-3.5 和 GPT-4 聊天,現在免費!

提高投資決策效率:利用 ChatGPT 分析資產負債表

ChatGPT 可以顯示美觀數學公式:Tex All the Tings Chrome Extension

TRIZGPT:解決問題的小顧問

當未來和過去交錯:AI 翻譯古老楔形文字 Cuneiform

ChatGPT Sidebar: 全方位 AI 助手 (Chrome Extension)

Grammarly 推出 GrammarlyGo:創新的生成式 AI 寫作助手