Code Video Model

概要

• テキストプロンプトから実行可能なThree.jsシーンを生成し、編集可能な形で動画制作の土台を構築できます。
• シーンをレンダリングしたプロキシ動画で構図や動きを明確化し、その構造をもとに最終動画を生成します。
• 参照画像を使って最終映像の外観を誘導でき、追加学習なしで既存の動画モデルを活用できます。

主な特徴

• コードによってオブジェクトの配置やアニメーション、カメラの軌道、物理的な動きなどを細かく制御できます。
• 学習済み動画モデルに初期ステップから条件付けを行い、シーン構造と動きを反映した映像を生成します。
• 物理に基づく動き、バレットタイム、シーン編集、ロボットシミュレーション、3D・4D再構成などに対応します。

こんな人におすすめ

• 生成動画の動きやカメラワークを厳密に設計したい、AI動画研究者や開発者に適しています。
• 生成メディアツールを開発するチームや、ロボットの動作・環境をシミュレーションしたいチームに向いています。
• 映像生成の偶然性を抑え、オブジェクトや物理挙動を細かく編集したいクリエイターにおすすめです。