AI×マーケティング2026年9月23日読了約5分

動画生成AI、3D記憶で長時間整合性向上

保存

Tencent等の研究チームが、視点を跨いでも矛盾のない映像を生成する動画ワールドモデル「WorldCrafter」を発表。分単位の探索でも破綻しない映像生成は、不動産内覧やゲーム開発の実務利用に道を開く。

研究の概要

WorldCrafterは、単一の画像やテキストを基に、カメラ視点を自由に動かしながら空間を探索できる動画ワールドモデルである。このモデルは、従来の技術が抱えていた課題、すなわち数秒から数十秒の間にカメラを動かすと、過去に生成された壁や家具の位置が変わってしまうという時間的・視点的な整合性の崩壊を克服するものである。

研究チームは、要求された視点に応じて過去の観測情報を圧縮するimplicit 3D-aware memory（暗黙的3次元認識メモリ）を提案した。この技術は、深度推定による明示的な対応付けを使用せず、メモリエンコーダと姿勢条件付き読み出しモジュールを動画生成器と共同学習させることで、限られたトークン予算の中に必要な視点情報を効率的に格納することを可能にする。さらに、直近の時間的文脈と数ステップで生成を完了させる蒸留技術を組み合わせることで、ストリーミング形式でのリアルタイムなシーン探索を実現した。これにより、静的・動的シーンの両方において、分単位の探索でも視覚品質を維持しながら、長時間の整合性とカメラ制御精度が大幅に改善されることが示された。

しくみをやさしく

WorldCrafterは、視点を自由に変更できる動画生成技術であり、特に過去の情報を効率的に扱うことに優れている。具体的には、カメラの動きに合わせて過去の映像情報を記憶し、必要な時にその情報を取り出すことで、視点が変わっても映像が破綻しないように設計されている。これにより、ユーザーはリアルタイムでシーンを探索することができ、従来の技術に比べて高い整合性を持つ映像体験を享受できる。

ビジネスへの示唆

この技術が実用化されることで、複数の業界において大きな影響を及ぼす可能性がある。特に不動産・建築業界においては、物件の写真1枚から矛盾のないバーチャル内覧動画を生成することができれば、内覧コンバージョン率の向上や設計変更時の再撮影コストの削減が期待される。また、ゲーム・エンターテインメント業界では、レベルデザインの試作工程を自動生成で補完することにより、開発期間とアセット制作コストの圧縮が見込まれる。さらに、自動運転やロボティクス分野では、シミュレーション環境の生成コストを下げ、訓練データの拡充に寄与する可能性がある。

この技術の導入が進むことで、顧客向けのインタラクティブ体験を提供しやすくなる点も注目される。具体的な導入部門とKPIは以下の通りである。

不動産・建築設計部門: バーチャル内覧の成約率、現地撮影コスト
ゲーム/エンタメ企業の技術部門: レベル制作リードタイム、開発人件費
小売・EC企業のマーケティング部門: バーチャル店舗の滞在時間、購買転換率
研究開発部門: ロボット・自動運転向け訓練データ生成コスト

従来の技術では数秒で映像が破綻し、実務利用には耐えなかったが、分単位で品質を維持できることで、顧客が実際に「歩き回れる」販促コンテンツとしての活用が現実味を帯びている。

現場での導入イメージ

仮に導入支援に入るなら、以下の4つのステップで進めることが考えられる。

棚卸し
現在の業務プロセスや使用しているツールを整理し、どの業務にWorldCrafterが適用可能かを評価する。このステップの目指す到達点は、導入候補業務の特定である。
差し込み先の設計
既存のツールや業務プロセスにWorldCrafterをどのように統合するかを設計する。新たなツールを増やさず、現実的な解決策を見つけることが目指される。このステップでは、具体的な導入方法を明確にする。
小さく試す（PoC）
小規模なプロジェクトとして、実際にWorldCrafterを用いた試験運用を行う。このステップの目指す到達点は、技術の実用性と効果を実証することである。
運用と横展開
試験運用の結果をもとに、全社的な運用体制を整え、他の部門への展開を進める。このステップでは、スケールアップを図り、全体の業務効率を向上させることが目指される。

全体として、導入支援の最終的な目標は、顧客に対してインタラクティブで高品質な体験を提供できる環境を整えることである。

今後の展望

WorldCrafterは現時点では研究段階のモデルであり、商用のCADやゲームエンジン、BIMツールとの連携、実写レベルのレンダリング品質確保など、実装面での課題は残る。しかし、バーチャル店舗や不動産テック、メタバース関連事業を検討する企業にとっては、今後1〜2年で登場する商用API化やクラウドサービス化の動向を注視する価値がある。まずは小規模なパイロットとして、バーチャル内覧やゲーム試作領域での実証実験から着手することが現実的な選択肢となるだろう。