Manga2Animate、スクリプトと絵コンテ計画で漫画をアニメ化するエージェント型フレームワーク

Manga2Animateは、クリエイター役とレビュー役のエージェントを組にしたマルチエージェントフレームワークで、漫画のコマからアニメーションスクリプトと視覚的な絵コンテを作成し、原作との忠実性と一貫性を高める。既存手法は漫画をテキスト中心に扱うか、ページを直接動画生成モデルに入力するため、キャラクターや画風が失われたり物語構造を誤解したりするとされる。論文では、ユーザースタディと広範な実験により、最先端手法より原作に忠実で、カット間の一貫性が高いアニメーションを生成したと報告している。