WorldClaw – Tencent Hunyuanチームが開発した3Dワールド生成フレームワーク 運営中

WorldClawはTencent Hunyuanチームが開発したAgent駆動型のオープンワールド3D生成フレームワークです。ユーザーが自然言語で説明を入力すると、システムが地形、エリア、建物、オブジェクト、空間関係を自動的に計画し、グローバルからローカルへ段階的に生成することで、Blender上に自由に探索でき、オブジェクト単位で編集可能な完全な3Dシーンを構築します。Claude Opus、GPT-Image-2、SAM3、Hunyuan3Dなど複数のモデルが連携して動作し、ビジュアルAgentによる自己検査・修復機能も備えています。宙に浮いたオブジェクトやメッシュの貫通など、接触に関する問題を自動的に修正できます。

インテリジェントなシーン計画：計画Agentがユーザーの説明を分析し、オープンなプロンプトをエリア、地形、オブジェクト、マテリアル、空間関係を含む構造化されたシーン仕様に変換します。
グローバルからローカルへの生成：まずワールドの地形と空間フレームワークを構築し、その後各エリアの詳細を段階的に追加することで、道路の断裂やスケールの不均衡を防ぎます。
独立したアセット生成：建物、植生、車両などのオブジェクトを独立したインスタンスとして保持します。単一のベイク済みモデルではないため、個別に移動、置換、編集できます。
ビジュアル検査と修復：ビジュアルAgentが複数の視点からレンダリングして、比率、姿勢、接触の問題を検査し、オブジェクトの浮遊やメッシュの貫通などの欠陥を自動的に修正します。
Blenderとの深い統合：地形生成、アセット生成、シーン配置、検査、レンダリングまでの全工程がBlender 5.1.1上で実行され、MCPインターフェースによる操作にも対応します。

マルチAgent協調アーキテクチャ：システムは計画Agent、シーン最適化Agent、ビジュアル検査Agentで構成され、それぞれシーン設計、Blender操作、品質検証を担当します。
モデルごとの役割分担：Claude Opus 4.8をAgentの基盤モデルとして使用し、GPT-Image-2が画像生成、SAM3/SAM3Dがセグメンテーション、Hunyuan3Dが3D再構築とアセット生成を担います。
Coarse-to-Fine生成戦略：まず意味情報を持つ高さ場を生成して地形の骨格を定め、エリアごとにオブジェクトの構成案を生成し、最後に各3Dアセットを個別に再構築して組み合わせます。
局所修復メカニズム：接触に関する問題がある場合は、該当する支持領域だけを変更し、全体の地形構造への影響を避けます。

説明を入力：自然言語で、作成したいオープンワールドのシーンを説明します。
インテリジェントな計画：計画Agentがプロンプトを自動的に分解し、エリア、地形、オブジェクト、空間関係を含む構造化されたシーン仕様を生成します。
地形の骨格を生成：システムが意味情報を持つ高さ場を生成し、山頂、河川、海岸などの地形エリアの空間的な基盤を定めます。
エリアごとのアセット生成：建物、植生、車両などの独立した3Dアセットをエリアごとに生成し、対応する位置に配置します。
ビジュアル検査と修復：ビジュアルAgentが複数の視点からレンダリングして検査し、比率の異常、浮遊、メッシュの貫通などの問題を自動的に修正します。
書き出しと編集：Blenderで完全なシーンを取得し、オブジェクトの位置調整、アセットの置換、マテリアルの変更を自由に行えます。

プロンプトから完全なワールドへ：自然言語による1つの説明から、地形、建物、植生、施設を含む、探索可能な完全な3Dシーンを自動的に計画・生成できます。アセットごとの手作業によるモデリングは必要ありません。
独立して編集可能なアセット：すべてのオブジェクトが独立したテクスチャ付きMeshとインスタンスとして保持されるため、全体を再生成することなく、個別に移動、置換、マテリアル変更ができます。
インテリジェントな自己検査と修復：ビジュアルAgentが比率、姿勢、接触の問題を自動的に検査し、浮遊やメッシュの貫通など、一般的な3D上の欠陥を修正して生成品質を高めます。
Blenderとの深い統合：全工程がBlender 5.1.1上で実行され、MCPインターフェースによる直接操作に対応しているため、既存の3Dワークフローにも容易に組み込めます。

プロジェクト公式サイト：https://tencent-hunyuan.github.io/Hunyuan3D-WorldClaw/
arXiv技術論文：https://arxiv.org/pdf/2608.05248

ゲームプロトタイプ開発：オープンワールドのレベルブロックアウトやコンセプトシーンを迅速に生成し、初期段階のゲームプレイ検証と反復を加速します。
映像のバーチャルプロダクション：大規模なロケーション用バーチャル環境を構築し、監督によるショットのプレビューやデジタルアセットのプリビズを可能にします。
VR/AR体験設計：自由に探索できる没入型3D空間を生成し、バーチャルツアー、トレーニングシミュレーション、展示などに活用できます。
建築と都市計画：大規模な地域計画案を可視化し、地形、建物、公共施設の配置を直感的に示します。
3Dクリエイティブコンセプトアート：デザイナーに編集可能な完全なシーンの基盤を提供し、ゼロから手作業で構築するコストを大幅に削減します。