Blog
Luma 推進3D物體生成技術，完成4300萬美元融資，以提升AI模型的真實感
Luma 推進3D物體生成技術，完成4300萬美元融資，以提升AI模型的真實感
January 11, 2024
重點摘要：
新聞內文：
幾年前，Alex Yu和Amit Jain共同創立了一家公司，讓人們可以使用智慧手機捕捉3D物體，無需額外設備。當時，Yu是加州大學伯克利分校的AI研究員，而 Jain則是蘋果公司的員工，負責建設「Vision Pro」的多媒體體驗。
他們的公司Luma在2021年推出了一款智慧手機應用程式，吸引了數百萬用戶（截至發布時已超過兩百萬），迅速獲得關注。但現在，隨著生成式AI技術的普及，Yu和Jain希望將Luma發展成一個比他們最初設想的還要更大、更好的東西。
Luma今天宣布，它將開始利用約3000個Nvidia A100 GPU的計算集群來訓練新的AI模型，這些模型可以根據Yu的話來說，「看到並理解、展示並解釋，最終與『世界』互動」。
該計劃的第一階段是創造能夠根據文字描述生成3D物體的模型；Luma在今年早些時候在其Discord服務器上推出了這樣一個名為「Genie」的模型。下一步將是開發解決Yu描述的當前生成式AI中「疑似真實效應」問題的「下一代」生成式AI模型。
Yu在一封電子郵件採訪中告訴TechCrunch：「我們相信多模式對於智慧至關重要。要超越語言模型，下一個突破將來自視覺」。
為了實現這一願景，Luma在由Andreessen Horowitz等新老支持者參與的B系列融資中籌集了4300萬美元。據熟悉情況的消息人士透露，這一輪使 Luma的估值在2億至3億美元之間；Luma的戰爭寶庫現在超過7000萬美元。
Luma目前的重心是推出創造3D模型的AI模型，這是一個競爭日益激烈的領域。這裡有「3DFY」和「Scenario」這樣的物體製作平台，以及「Hypothetic」、「Kaedim」、「Auctoria」和「Mirage」等新創公司。Stability AI最近也推出了一個獨立的3D模型生成工具，而新興公司Atlas也是如此。即使是Autodesk和Nvidia這樣的老牌公司也開始涉足這個領域，推出了將圖像轉換為3D模型的 Get3D和從文本描述生成模型的ClipForge。
那麼Luma的工具如何脫穎而出呢？Yu 說，主要是「忠誠度」。
他說：「目前的模型都是在二維圖像上進行訓練的，當被要求生成場景時，它們會弄亂空間、身體和動作」。「很難在最初幾次嘗試中生成任何連貫且可用的東西，限制了您可以使用輸出的位置……我們正在帶來直觀應用程式中最先進的生成式真實技術」。
考慮到這是Luma野心勃勃的新路線圖的早期階段，這是一個很大的承諾。Genie的改進版本今天推出，但更強大的生成式AI模型還有很長的路要走。
然而，Luma正在浪費時間，計劃在明年底之前將其24人的工作團隊增加一倍，同時組建一個「數千」GPU 的模型運行服務器集群。也許它會取得進展；而時間會證明一切。
Jain說：「我們一直在擴大跨生成式AI研究、工程、設計和產品的團隊，以實現我們的願景，並計劃在這一輪之後顯著加速這一步伐」。「有了Genie，首次使用AI大規模創造3D物體變得可能，並在短短四週內增長到10萬用戶……但我們想要為我們的使用者打造遠遠更強大、更智慧、更有用的視覺模型」。
新聞原址： https://techcrunch.com/2024/01/09/luma-raises-43m-to-build-ai-that-crafts-3d-models/
- Luma推出新AI模型，可根據文字描述生成3D物體，使用約3000個Nvidia A100 GPU的計算集群來訓練新模型，目標是「看到、理解、展示並解釋世界」。
- Luma完成了4300萬美元的B系列融資，估值在2億至3億美元之間，目前的重心是推出創造3D模型的AI模型，面對諸如Stability AI、Atlas、Autodesk和Nvidia等競爭對手。
- Luma的創辦人Alex Yu和Amit Jain專注於提高生成式AI技術的忠誠度，以克服目前模型在生成連貫且可用的場景時的限制，計劃在明年底將工作團隊擴大一倍。
新聞內文：
幾年前，Alex Yu和Amit Jain共同創立了一家公司，讓人們可以使用智慧手機捕捉3D物體，無需額外設備。當時，Yu是加州大學伯克利分校的AI研究員，而 Jain則是蘋果公司的員工，負責建設「Vision Pro」的多媒體體驗。
他們的公司Luma在2021年推出了一款智慧手機應用程式，吸引了數百萬用戶（截至發布時已超過兩百萬），迅速獲得關注。但現在，隨著生成式AI技術的普及，Yu和Jain希望將Luma發展成一個比他們最初設想的還要更大、更好的東西。
Luma今天宣布，它將開始利用約3000個Nvidia A100 GPU的計算集群來訓練新的AI模型，這些模型可以根據Yu的話來說，「看到並理解、展示並解釋，最終與『世界』互動」。
Meet Genie, a research preview of an all-new kind of generative 3D foundation model #MadeWithGenie
— Luma AI (@LumaLabsAI) November 1, 2023
💬 Create 3D things in seconds on Discord
⚡️ Prototype in various styles
🎨 Customize materials
🆓 Free during research preview
Try it now 👇https://t.co/NVgbsvn2XU pic.twitter.com/qm7PkdMEAp
該計劃的第一階段是創造能夠根據文字描述生成3D物體的模型；Luma在今年早些時候在其Discord服務器上推出了這樣一個名為「Genie」的模型。下一步將是開發解決Yu描述的當前生成式AI中「疑似真實效應」問題的「下一代」生成式AI模型。
Yu在一封電子郵件採訪中告訴TechCrunch：「我們相信多模式對於智慧至關重要。要超越語言模型，下一個突破將來自視覺」。
為了實現這一願景，Luma在由Andreessen Horowitz等新老支持者參與的B系列融資中籌集了4300萬美元。據熟悉情況的消息人士透露，這一輪使 Luma的估值在2億至3億美元之間；Luma的戰爭寶庫現在超過7000萬美元。
Luma目前的重心是推出創造3D模型的AI模型，這是一個競爭日益激烈的領域。這裡有「3DFY」和「Scenario」這樣的物體製作平台，以及「Hypothetic」、「Kaedim」、「Auctoria」和「Mirage」等新創公司。Stability AI最近也推出了一個獨立的3D模型生成工具，而新興公司Atlas也是如此。即使是Autodesk和Nvidia這樣的老牌公司也開始涉足這個領域，推出了將圖像轉換為3D模型的 Get3D和從文本描述生成模型的ClipForge。
那麼Luma的工具如何脫穎而出呢？Yu 說，主要是「忠誠度」。
他說：「目前的模型都是在二維圖像上進行訓練的，當被要求生成場景時，它們會弄亂空間、身體和動作」。「很難在最初幾次嘗試中生成任何連貫且可用的東西，限制了您可以使用輸出的位置……我們正在帶來直觀應用程式中最先進的生成式真實技術」。
考慮到這是Luma野心勃勃的新路線圖的早期階段，這是一個很大的承諾。Genie的改進版本今天推出，但更強大的生成式AI模型還有很長的路要走。
然而，Luma正在浪費時間，計劃在明年底之前將其24人的工作團隊增加一倍，同時組建一個「數千」GPU 的模型運行服務器集群。也許它會取得進展；而時間會證明一切。
Jain說：「我們一直在擴大跨生成式AI研究、工程、設計和產品的團隊，以實現我們的願景，並計劃在這一輪之後顯著加速這一步伐」。「有了Genie，首次使用AI大規模創造3D物體變得可能，並在短短四週內增長到10萬用戶……但我們想要為我們的使用者打造遠遠更強大、更智慧、更有用的視覺模型」。
新聞原址： https://techcrunch.com/2024/01/09/luma-raises-43m-to-build-ai-that-crafts-3d-models/