注目★★★★★Hugging Face Papers
CLI-Universe:LLMターミナルエージェント向け検証済み訓練データ6,000件を自動生成
30秒で把握
- 1CLI-UniverseがLLMターミナルエージェント向け検証済みデータ6,000件を生成
- 2候補の約3分の2を破棄する多段階検証で、Qwen3-32Bが33.4%の最高水準を達成
- 3ターミナルエージェント開発チームはCLI-Universe-6Kをベースライン比較に確認
要約
CLI-Universeは、LLMベースのターミナルエージェント向けに検証済みの実行可能なトレーニングデータを自動生成する合成エンジンだ。ドメイン・スキルタイプ・能力・エンジニアリング軸の多次元タクソノミーからタスク候補を生成し、Dockerized環境での多段階検証パイプラインで候補の約3分の2を破棄する。残った高品質な6,000件の軌跡データセット(CLI-Universe-6K)でQwen3-32Bをファインチューニングすると、Terminal-Bench 2.0で33.4%を達成し、同規模モデルで新たな最高水準を記録した。
あなたへの影響
ターミナルエージェントの開発・評価に取り組むチームは。
推奨:CLI-Universe-6KのデータセットとTerminal-Bench 2.0での結果を自社モデルのベースライン比較に活用できる。