Pegasus 1.6 by TwelveLabs
ストックにはログインが必要です
1人称視点の映像をロボット学習データに変換
Artificial Intelligence
Video
Robots
概要
- Pegasus 1.6は、ウェアラブルカメラやロボット搭載カメラなど、1人称視点の映像を理解するTwelveLabsの動画モデルです。
- 生の遠隔操作・エゴセントリック映像から、学習パイプラインに組み込める構造化データを自動生成します。
主な特徴
- カスタムスキーマに基づくタイムスタンプ付きメタデータ抽出に対応し、行動ラベルや作業内容を時系列で整理できます。
- 手・工具・物体の相互作用を詳細に認識し、文脈から人物や対象物を特定するグラウンデッドなエンティティ認識も強化されています。
- タスクナレーションやコンプライアンス評価に対応し、大量の映像を手作業でラベリングする負担を軽減します。
こんなチームにおすすめ
- ロボットやフィジカルAIの開発現場で、遠隔操作データや人間の作業映像を学習用データへ変換したいチームに適しています。
- 行動ラベル付けや次の行動予測に必要な1人称視点の映像を大量に保有し、処理を効率化したいデータチームに向いています。
投票数: 269