World Labs推出Marble：用於根據文本、圖像和視頻提示創建和編輯3D世界的AI工具

簡要概述

World Labs剛剛發布了Marble，這是其第一個商業世界模型，可以根據文本、圖像、視頻或3D布局生成持久的3D環境。

空間智能公司World Labs推出了Marble，一種開創性的生成多模態世界模型，使用戶能夠從文本或圖像提示創建3D環境。最初向一小部分測試用戶提供，Marble現在支持包括文本、圖像、視頻和粗略3D布局在內的廣泛輸入類型，並允許對3D世界進行交互式編輯、擴展和組合。一旦創建，這些世界可以導出爲高斯斑點、網格或視頻等格式，爲用戶提供更多的控制和靈活性。

除了 Marble 工具，World Labs 還推出了 Marble Labs，這是一個鼓勵跨遊戲、視覺特效、設計和機器人等領域的合作與實驗的創意平台。Marble Labs 提供案例研究、教程和文檔，爲用戶提供學習和分享自己 3D 世界的資源。這款新工具的多模態能力基於人類對世界的感知整合了多種感官——視覺、聽覺、觸覺和語言——形成一個統一的心理模型。類似地，Marble 的世界模型旨在綜合各種類型的輸入，創造出隨着新信息的加入而發展的綜合 3D 世界。

Marble作爲下一代世界模型，通過允許用戶輕鬆生成詳細的3D世界，並以精準的方式迭代優化，從簡單的提示到復雜的交互編輯，提供了廣闊的創作可能性。

World Labs 讓用戶通過文本、圖像和視頻提示創建、定制和擴展 3D 世界

Marble允許用戶從單張圖像或簡短的文本提示生成完整的3D世界，提供了一種直觀簡單的方式來創建各種不同藝術風格的場景。通過利用圖像提示，用戶可以將Marble與其他AI工具集成，從生成的圖像中創建3D環境。然而，雖然文本和圖像提示非常強大，但它們提供的創意控制有限，要求Marble生成場景中任何缺失的細節，這有時會導致意想不到的結果。

對於尋求更多控制的用戶，Marble 還支持多圖像提示，可以將不同的圖像組合在一起，創建一個統一的 3D 世界。這種方法通過讓用戶從不同角度定義世界的外觀，允許更高的精確度。多圖像提示還可以用於重建現實世界的空間，Marble 將從不同視角合成多張照片或視頻，形成實際位置的 3D 模型。

Marble的創作過程設計爲迭代式，用戶可以在生成後進一步完善他們的世界。該平台包括本地編輯工具，用於對3D世界進行小型和大型調整，從移除或修改對象到完全改變視覺風格或結構。爲了提供更詳細的控制，Marble推出了Chisel，一個面向高級用戶的AI驅動工具，使用戶能夠直接在3D中雕刻世界。用戶可以使用簡單的3D形狀或導入的資產來構建他們的場景，並添加文本提示以指示視覺風格，從而在世界創建中提供新的靈活性。

對於更大和更廣闊的世界，Marble 提供了工具來增加生成世界的大小。用戶可以擴展特定區域，提高以前可能缺乏精確度的區域的細節和清晰度。此外，Composer Mode 允許用戶將多個生成的世界組合成更大的空間，提供對場景布局和安排的完全控制。

一旦創建了一個世界，Marble 提供了幾種導出選項。高斯斑點提供了 3D 場景的最高保真度表示，而三角網格可以導出以供在各種行業標準工具中使用。Marble 還支持視頻渲染，具有像素完美的相機控制，允許用戶以視頻形式捕捉和分享他們的世界，並可以選擇用額外細節或動態元素來增強這些視頻。

Marble Labs提供一個平台，用於探索和實驗世界建設，展示來自各個行業的藝術家、工程師和設計師的創意和技術項目。隨着Marble的發展，它旨在擴展到更多的互動體驗，可能實現模擬、機器人技術和其他高級應用。

雖然遊戲和虛擬現實通常是人們首先想到的行業，但世界模型的潛在應用非常廣泛，遠遠超出這些領域。這些模型有能力改變各個領域，包括機器人模擬、建築設計和電影世界構建。與圖像和視頻生成模型類似，世界模型正迅速成爲有價值的工具，預計將在不久的將來整合到各個行業的工作流程中。