三維捕捉機(jī)構(gòu)Luma AI已經(jīng)發(fā)布了其新的虛幻引擎插件，用于在虛幻引擎5中實(shí)時(shí)導(dǎo)入和渲染容積式NeRFs。

該插件在alpha版本中是免費(fèi)的，它可以在UE5中顯示使用Luma AI的網(wǎng)絡(luò)應(yīng)用程序生成的現(xiàn)實(shí)世界物體或環(huán)境的體積捕捉，以用于游戲和虛擬生產(chǎn)。

使用神經(jīng)輻射場捕捉真實(shí)世界的三維物體和環(huán)境
Luma AI是基于神經(jīng)輻射場（NeRF）的3D捕捉領(lǐng)域的先驅(qū)：這是一種訓(xùn)練神經(jīng)網(wǎng)絡(luò)的新方法，可以從一組源圖像中優(yōu)化場景的體積表現(xiàn)。

雖然它的創(chuàng)造者專注于將NeRF作為合成場景新視圖的手段，但體積表示法可以轉(zhuǎn)換為三維網(wǎng)格，使其成為三維掃描攝影測量的替代方法。

Luma Unreal Engine Plugin插件 演示視頻：

就Luma AI而言，捕獲物可以從使用其iOS應(yīng)用程序在iPhone上捕獲的視頻中生成，也可以從上傳至其網(wǎng)絡(luò)應(yīng)用程序的視頻或圖像的壓縮文件中生成，兩者目前都在測試階段免費(fèi)使用。

網(wǎng)絡(luò)應(yīng)用的用戶可以下載glTF、OBJ或USDZ格式的物體捕捉，以及PLY格式的場景捕捉--現(xiàn)在還可以下載Luma Field文件，用于新的虛幻引擎插件。

將您的體積捕捉數(shù)據(jù)導(dǎo)入虛幻引擎5進(jìn)行實(shí)時(shí)渲染
該插件可以將這些Luma Field文件導(dǎo)入到虛幻引擎中作為環(huán)境使用，自動(dòng)生成一組Blueprints來照亮并顯示這些捕獲物。

用戶可以從捕獲的場景中選擇烘烤的照明或從虛幻引擎場景中選擇動(dòng)態(tài)照明。

其他藍(lán)圖會(huì)自動(dòng)裁剪捕捉到的中心物體，并生成一個(gè)天空環(huán)境。

該插件是作為兩個(gè)虛幻引擎項(xiàng)目樣本的一部分提供的，一個(gè)是為游戲和實(shí)時(shí)項(xiàng)目定制的，另一個(gè)是為電影和電影項(xiàng)目定制的，盡管它在這些項(xiàng)目之外也可以很好地工作。

它目前不能生成碰撞器，所以要在模擬中使用捕捉器，或者在游戲中使用物理學(xué)，您需要手動(dòng)添加碰撞器對象，但是這可能會(huì)在未來的更新中改變。

價(jià)格和系統(tǒng)要求
Luma AI的虛幻引擎插件只與在Windows上運(yùn)行的虛幻引擎5.0+兼容。它目前是免費(fèi)的alpha版本。

網(wǎng)絡(luò)應(yīng)用應(yīng)該可以與任何標(biāo)準(zhǔn)的桌面瀏覽器一起使用，而且目前是免費(fèi)的測試版。

什么是NeRFs：
NeRFs是“神經(jīng)輻射場表示”（Neural Radiance Fields）的簡稱，是一種基于深度學(xué)習(xí)的渲染技術(shù)。它使用神經(jīng)網(wǎng)絡(luò)來學(xué)習(xí)場景中物體的3D表面形狀以及其所放置的位置和角度，并從中生成逼真的渲染圖像。與傳統(tǒng)的基于幾何模型的渲染技術(shù)不同，NeRFs的優(yōu)點(diǎn)在于不需要先建立一個(gè)復(fù)雜的幾何場景來進(jìn)行渲染，能夠從已知的視角中獲取單一的圖片，通過深度學(xué)習(xí)算法來推斷三維場景信息。這使得NeRFs在虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)、動(dòng)畫電影等領(lǐng)域中具有很高的應(yīng)用潛力。

NeRF的最主要功能用一句話概括就是：使用靜態(tài)場景下的多個(gè)視角的照片（大約幾十至上百張），合成出任意新視角的圖片。

RRCG會(huì)一直帶來精彩的CG資訊/教程/素材，如果喜歡就關(guān)注我們，請點(diǎn)贊并轉(zhuǎn)發(fā)給你的朋友哦！ 一鍵三連吧~ 作者：RRCG人人素材 https://www.bilibili.com/read/cv22895749 出處：bilibili

更多CG資訊請關(guān)注：https://www.rrcg.cn/forum-612-1.html
Unreal Engine教程專區(qū)：https://www.rrcg.cn/forum-578-1.html
【中文字幕】UE5虛幻引擎大型開放環(huán)境燈光照明技術(shù)視頻教程：
https://www.rrcg.cn/thread-16781904-1-1.html