Asayomu Tech
注目★★★★★Hugging Face Papers

CLI-Universe:LLMターミナルエージェント向け検証済み訓練データ6,000件を自動生成

30秒で把握

  • 1CLI-UniverseがLLMターミナルエージェント向け検証済みデータ6,000件を生成
  • 2候補の約3分の2を破棄する多段階検証で、Qwen3-32Bが33.4%の最高水準を達成
  • 3ターミナルエージェント開発チームはCLI-Universe-6Kをベースライン比較に確認

要約

CLI-Universeは、LLMベースのターミナルエージェント向けに検証済みの実行可能なトレーニングデータを自動生成する合成エンジンだ。ドメイン・スキルタイプ・能力・エンジニアリング軸の多次元タクソノミーからタスク候補を生成し、Dockerized環境での多段階検証パイプラインで候補の約3分の2を破棄する。残った高品質な6,000件の軌跡データセット(CLI-Universe-6K)でQwen3-32Bをファインチューニングすると、Terminal-Bench 2.0で33.4%を達成し、同規模モデルで新たな最高水準を記録した。

あなたへの影響

ターミナルエージェントの開発・評価に取り組むチームは。

推奨:CLI-Universe-6KのデータセットとTerminal-Bench 2.0での結果を自社モデルのベースライン比較に活用できる。

詳細を読む → 元記事へ※ 本文は元記事をご確認ください (asayomu は要約のみ提供)

関連する記事

※ 外部記事の権利は原著作者に帰属します。著作権削除要請は copyright@asayomu.jp までご連絡ください(受領確認 24h・実処理 72h 以内)。