隻用一部手機,現實中的 2D 照片就能渲染出 3D 模型?
沒錯,無需再手動上傳電腦或安裝激光雷達,蘋果手機自帶 APP 就能生成 3D 模型。
這個名叫 Luma AI 的 "NeRF APP",正式上架 App Store 後爆火:
小如 3D 裝飾模型,兼具燈光和形狀細節:
大到整個墓園的 3D場景渲染版,都能被很好捕捉:
這樣無論是風景、3D 物體還是人物,都可以被很好地保存進手機,并快速生成對應的 3D 模型。
所以這個 APP 究竟包含什麼功能,它又具體要如何使用?
NeRF 手機 APP 是什麼?
Luma AI 是一個基于 NeRF 打造的 APP,目前能在蘋果商店中搜到:
NeRF是少量 2D 照片生成 3D 場景的經典 AI 模型,最初版本由 UC 伯克利和谷歌開發,隻需要輸入少量靜态圖片,就能做到多視角的逼真 3D 效果。
最初 NeRF 需要專業相機拍幾百張照片,并在拍照時嚴格遵守參數坐标,但由于它的代碼數據開源,目前已經有不少簡化版模型被開發出來。
不僅照片數量有所下降,從幾百張到幾十張甚至幾張,對拍照位置和照相機的要求也有所降低。
但能直接通過 APP 導引、随時随地可用的 NeRF,幾乎還沒出現過。
現在,Luma AI 團隊基于雲服務器,實現了這個可以實時渲染3D 物體、産品或風景和場景的 APP。
它包含自動調整焦距、視角和畫面比例調整等不同功能,捕捉到的 3D 場景則包含複雜形狀、反射和照明等細節。
同時,制作得到的 3D 模型既可以直接分享到網上,比 2D 照片更全方位地展示細節:
也可以放進 Blender 等遊戲引擎中,讓它 " 動起來 ":
現在,你也可以試一試了。
支持 iPhone 11 或以上機型
目前 Luma AI 支持 iPhone 11 或以上的機型,操作方法也很簡單。
支持的玩法也很多樣,從調整焦距、效果預覽都包括:
實際拍出來的效果,可以直接放進電影中,有運鏡内味了:
所以,沒有蘋果手機怎麼辦?
在網頁端上傳照片也可以,視頻和照片集二選一:
在 Luma AI 公開的 3D 模型分享庫中,已經有不少網友上傳了自己随手拍的 3D 模型:
目前支持導出的 3D 模型格式,主要包括 obj 和 gltf 兩種。
你想好用它來拍出大片效果、做遊戲模型,還是把家裡的 3D 手辦 " 電子化 " 了嗎?
參考鍊接:
[ 1 ] https://twitter.com/LumaLabsAI/status/1611466398546690048
[ 2 ] https://captures.lumalabs.ai/imagine
[ 3 ] https://apps.apple.com/us/app/luma-ai/id1615849914