3分の720p動画を5分かつ無料で生成。再生しながらプロンプトで改変もできる、中国アリババ製ワールドモデル「HappyOyster」が凄すぎる（CloseBox）

概要

アリババが開発した「HappyOyster」は、3分の720p動画をわずか5分で無料生成でき、再生中のリアルタイム演出やWASDキーによる世界探索も可能な画期的なAIワールドモデルです。

詳細内容

アリババのATHチームが公開した「HappyOyster」は、映像と音声を同時に生成するネイティブ・マルチモーダル・アーキテクチャを採用した『ワールドモデル』です。既存の動画生成AIと一線を画す点は、その圧倒的な生成速度と高いインタラクティブ性にあります。3分間の動画を約5分で生成できるスピードを誇り、1枚の静止画からキャラクターの一貫性を高度に維持したまま長尺動画を作成可能です。本サービスには2つの主要モードがあります。「Directingモード」では、再生中にプロンプトを追加して映像内容をリアルタイムで改変でき、キャラクターの行動や背景を動的に演出できます。「Adventureモード」では、生成された空間をゲームのようにWASDキーで自由に移動・探索することが可能です。現在は1日1000クレジットが無料配布されており、誰でも手軽に高品質な動画制作やワールド探索を体験できる点が大きな魅力です。中国の法規制への準拠が前提ですが、権利関係をクリアした素材であれば商用利用も可能とされています。

元記事を読む他のサマリーを見る