RAG構成要素の組み合わせ効果を検証するLASAGNA

RAGの個別技術の効果は、組み合わせると必ずしも再現されないことが450構成の検証で示された。検索技術3種は単独では合計+47%の改善が予測されたが、併用時の改善は+17%にとどまった。検索品質と回答の忠実性では構成要素の効き方が異なり、一方の最適化が他方を損なうこともある。コーパスが大きくなると最良の組み合わせも変わるという。評価にはオープンソースのフレームワークLASAGNAが用いられた。

Hugging Face Daily Papersより

推移を表示するための継続的な観測データがまだ足りません。