注目★★★★★Hugging Face Papers
FORT-Searcher: ショートカット耐性訓練データで深層検索エージェントを強化
30秒で把握
- 1FORT がショートカット耐性訓練データ合成フレームワークを公開
- 24種のショートカットリスクを定式化し SFT のみで最高性能を達成
- 3同規模オープンソース検索エージェント中でベンチマーク首位を記録
要約
中国人民大学の研究チームが、深層検索エージェント訓練向けのショートカット耐性データ合成フレームワーク「FORT」を発表した。既存手法はグラフ構造の複雑化で難易度を高めようとするが、証拠の共起・単一手がかり依存・定数露出・事前知識バインディングという4種のショートカットリスクにより実際の検索難易度が低下する問題を定式化した。FORTはエンティティ選択から証拠グラフ構築、質問生成、敵対的改良の各段階でショートカットリスクを制御し、訓練データを構築する。
あなたへの影響
深層検索エージェントの訓練データ品質に着目した研究で、ショートカット問題を定量診断する手法が実用的。
推奨：自社で検索エージェントや RAG 評価データを構築しているチームは、4種のショートカットリスク指標を既存データセットの品質検査に活用できる可能性がある。