Luma AI

Luma AI是一家總部位于美國加州的公司，成立于2021年9月，旨在讓每個人都能捕捉和體驗3D世界。 Luma AI的核心技術是NeRF（Neural Radiance Fields），這是一種三維重建技術方案，它的特點是基于現有視角的圖像生成新視角的圖像。有了NeRF，可以通過拍攝大量圖片或視頻來創建出一個可微分的三維場景。相較于傳統的攝影測量方案，NeRF的優勢在于可以用更少量的數據生成三維模型。
Luma AI的軟件是由該公司基于云服務器開發，只需要一部Apple手機，無需安裝激光雷達或花哨的設備，就能將現實中的2D照片渲染成3D模型，捕捉到的3D場景則包含復雜形狀、反射和照明等細節。制作得到的3D模型既可以直接分享到網上，比2D照片更全方位地展示細節。
Luma AI是基于NeRF的一種衍生算法，在原有的NeRF算法的基礎上，Luma AI做了很多改進和優化。Luma AI在場景圖像獲取、數據預處理、模型訓練、模型渲染及其他模型文件的生成等方面均做了很多優化工作。例如，之前NeRF在生成帶紋理的Mesh模型時需要對場景進行360度環繞拍攝，而Luma AI即使在非360度拍攝的場景下也能渲染出帶紋理的Mesh模型。更多的優化方面將在后文進行分析。
Luma AI的Beta版本目前包括iOS移動端和Web端。在二維圖像生成3D模型方面，Luma AI的效果碾壓目前絕大部分NeRF算法，即使在復雜的形狀和場景下也能得到逼真的細節和紋理，能夠勝任多種復雜場景的三維建模需求。和現有的其他三維建模方法相比，Luma AI操作更加簡單，即使一個“小白”也能分分鐘掌握，基本實現了“零成本”建模。Luma AI能夠導出渲染好的mp4視頻、場景點云和Mesh模型，但不能導出訓練好的神經網絡模型。