#検索安定性

RAGのチャンク分割をマージン最大化視点で考える

RAGの検索精度は「チャンク間の埋め込みベクトル距離を最大化する」ことで劇的に向上します。SVM のマージン最大化の考え方を応用すると、チャンク間の距離が大きいほどクエリの小さな変動に強くなり、検索結果が安定します。著者は既存研究を横断的に検証し、実験で「段落単位の分割が最適マージンを実現する」ことを確認。長すぎるチャンク・短すぎるチャンク両方の問題点を理論的かつ実践的に解説しています。