VibeVideoBenchでコード駆動動画生成を評価

コードで動画を生成するマルチモーダルエージェントを評価するベンチマークVibeVideoBenchが発表され、上位システムは多くのタスクで核心要件を満たす一方、時間管理の失敗で頻繁につまずくことが示された。英語と中国語の239タスク（12カテゴリ）で9つの最先端エージェントを評価した結果、GPT-6 AstraとClaude Opus 5.5が1位と2位になり、最上位システムは76.3%のタスクで核心要件をすべて満たした。失われた動画の約4分の3は、最終レンダリングの開始が遅れる、処理が遅すぎる、または開始されないことによるものだった。

Hugging Face Daily Papersより

推移を表示するための継続的な観測データがまだ足りません。