World LabsがMarbleを発表：テキスト、画像、動画のプロンプトから3Dワールドを作成・編集するためのAIツール

概要

World Labsは、テキスト、画像、動画、または3Dレイアウトから永続的な3D環境を生成する最初の商業用ワールドモデル「Marble」をリリースしました。

空間知能企業World Labsは、ユーザーがテキストや画像のプロンプトから3D環境を作成できる先駆的な生成的マルチモーダルワールドモデル「Marble」を発表しました。最初は限られたベータユーザーのグループに提供されていましたが、Marbleは現在、テキスト、画像、動画、粗い3Dレイアウトなど、幅広い入力タイプをサポートし、インタラクティブな編集、拡張、3D世界の組み合わせを可能にします。作成されたこれらの世界は、ガウシアンスポラット、メッシュ、または動画などの形式でエクスポートでき、ユーザーは自分の創造物に対してより多くのコントロールと柔軟性を持つことができます。

Marbleツールに加えて、World LabsはMarble Labsを導入しました。これは、ゲーム、VFX、デザイン、ロボティクスなどの分野でのコラボレーションと実験を促進するクリエイティブプラットフォームです。Marble Labsは、ケーススタディ、チュートリアル、ドキュメントを提供し、ユーザーが自分の3Dワールドを学び、共有するためのリソースを提供します。この新しいツールのマルチモーダル機能は、人間の世界に対する認識が視覚、聴覚、触覚、言語などの複数の感覚を統合して一貫したメンタルモデルを形成するという考えに基づいています。同様に、Marbleのワールドモデルは、様々なタイプの入力を合成して新しい情報が追加されるにつれて進化する包括的な3Dワールドを作成するように設計されています。

Marbleは次世代の世界モデルとして機能し、ユーザーが簡単なプロンプトから複雑なインタラクティブな編集まで、詳細な3D世界を容易に生成し、精度を持って反復的に洗練することを可能にする広範な創造的可能性を提供します。

World Labsは、ユーザーがテキスト、画像、動画のプロンプトから3D世界を作成、カスタマイズ、拡張できるようにします

Marbleは、ユーザーが単一の画像または短いテキストプロンプトからフル3Dワールドを生成できるようにし、さまざまなアートスタイルでさまざまなシーンを作成するための直感的で簡単な方法を提供します。画像プロンプトを活用することで、ユーザーはMarbleを他のAIツールと統合し、生成された画像から3D環境を作成できます。ただし、テキストと画像プロンプトは強力ですが、創造的なコントロールが限られており、Marbleがシーンの欠けている詳細を生成する必要があるため、時には予期しない結果をもたらすことがあります。

よりコントロールを求めるユーザーのために、Marbleはマルチイメージプロンプトもサポートしています。異なる画像を組み合わせて統一された3D世界を作成することができます。このアプローチは、ユーザーがさまざまな角度から世界の外観を定義することを可能にするため、より精度が高くなります。マルチイメージプロンプトは、実際の場所の3Dモデルに異なる視点からの複数の写真やビデオを合成することで、現実の空間を再現するためにも使用できます。

Marbleのクリエイティブプロセスは反復的に設計されており、ユーザーは生成後にさらに自分の世界を洗練させることができます。このプラットフォームには、オブジェクトの削除や修正から視覚スタイルや構造の完全な変更に至るまで、3D世界に対する小さな調整や大きな調整を行うためのネイティブな編集ツールが含まれています。より詳細な制御のために、MarbleはChiselを導入しました。これは高度なユーザー向けのAI駆動ツールで、世界を3Dで直接彫刻することを可能にします。シンプルな3D形状やインポートしたアセットを使用して、ユーザーはシーンを構成し、視覚スタイルを指示するためのテキストプロンプトを追加することができ、世界の創造における新しい柔軟性を提供します。

より大きく広がりのある世界のために、Marbleは生成された世界のサイズを増やすためのツールを提供します。ユーザーは特定の地域を拡張でき、以前は精度を欠いていた可能性のある領域での詳細や明瞭さを改善します。さらに、Composer Modeを使用すると、ユーザーは複数の生成された世界を大きな空間に組み合わせ、シーンのレイアウトや配置に対する完全な制御を提供します。

世界が作成されると、Marbleはいくつかのエクスポートオプションを提供します。ガウススプラットは3Dシーンの最高忠実度の表現を提供し、三角メッシュはさまざまな業界標準ツールで使用するためにエクスポートできます。Marbleはまた、ピクセル完璧なカメラ制御でのビデオレンダリングをサポートしており、ユーザーは自分の世界をビデオ形式でキャプチャして共有でき、これらのビデオに追加の詳細や動的要素を強化するオプションも提供します。

Marble Labsは、業界を超えたアーティスト、エンジニア、デザイナーからのクリエイティブおよび技術的プロジェクトを展示し、世界構築を探求し実験するためのプラットフォームを提供します。Marbleが進化するにつれて、よりインタラクティブな体験に拡大し、シミュレーション、ロボティクス、その他の高度なアプリケーションを可能にすることを目指しています。

ゲームやバーチャルリアリティはしばしば最初に思い浮かぶ産業ですが、ワールドモデルの潜在的な応用は広範で、これらの分野を超えて広がっています。これらのモデルは、ロボティクスシミュレーション、建築デザイン、映画の世界構築など、さまざまな分野を変革する能力を持っています。画像や動画生成モデルと同様に、ワールドモデルは急速に貴重なツールとなり、近い将来、広範な産業のワークフローに統合されることが期待されています。