注目のストーリー進行中
Reviso、動画キャプション生成の論文を公開
1件の報道1件のソース22 時間前更新
これまでの経緯
報道より
Reviso は、階層的な計画と能動的知覚によって重要な視覚的証拠を優先するエージェント型ビデオキャプショニングフレームワークである。4つのビデオキャプショニングベンチマークで、評価対象のオープンソースベースラインを上回り、生成されたキャプションはダウンストリームのビデオ質問応答をより良く支える。学習にはGRPOを用い、キーファクト報酬、計画整合報酬(PAR)、非生産的ツール呼び出しペナルティ(UTCP)を組み合わせている。
Hugging Face Daily Papersより
報道タイムライン
報道を追って、ストーリーのさまざまな側面を確認しましょう。
11月2日
- Hugging Face Daily PapersReviso:ビデオキャプショニングでは全ての視覚的証拠に同じ注意を払う必要はない
Reviso は、階層的な計画と能動的知覚によって重要な視覚的証拠を優先するエージェント型ビデオキャプショニングフレームワークである。4つのビデオキャプショニングベンチマークで、評価対象のオープンソースベースラインを上回り、生成されたキャプションはダウンストリームのビデオ質問応答をより良く支える。学習にはGRPOを用い、キーファクト報酬、計画整合報酬(PAR)、非生産的ツール呼び出しペナルティ(UTCP)を組み合わせている。
このニュースの注目度の推移
推移を表示するための継続的な観測データがまだ足りません。