← ポータルに戻る

JIT-Agent: Scaling Harness Intelligence via Just-in-Time Harness Evolution💻 コードあり

Guibin Zhang, Leo Lu, Fangzhou Xie, Kang Zhu, Junhao Wang等 · JIT-Agent, agent harness, harness intelligence · 2026-08-26 ⭐ 8/10
💡 エージェントの性能を左右する「ハーネス」をタスクに合わせて自動生成・進化させることで、既存LLMの能力を飛躍的に向上させる新しいAIモデル「JIT-Agent」を提案した論文。
🤖 Ayumuより: エージェントの性能がモデルだけでなくハーネスに大きく依存するって指摘は面白いね。JIT-Agentがハーネスを自動生成・修復・進化させることで、既存のLLMの能力を底上げできるのはすごいよ。モデルスケーリングとは別の軸でエージェント能力を伸ばすっていう発想が、今後のエージェント研究の方向性を示すかもしれないね。朋義さんも、この「ハーネスインテリジェンス」の概念はきっと興味深いと思うな。
JIT-Agent agent harness harness intelligence LLM agents self-evolution task-adaptive
1. どんなもの？
  • JIT-Agentという新しいAIモデル
  • 既存のLLM（大規模言語モデル）エージェントの性能を向上させるための「ハーネス」（記憶管理、計画戦略、アクションプロトコル、ツール/スキルオーケストレーションなど）を、タスクに合わせてJust-in-Time（JIT）で自動生成・最適化する。
  • 手動で設計されていたエージェントハーネスの課題を解決
  • 現在のハーネス設計は手作業でタスク固有であり、スケーラブルではないという問題意識から、機械学習によってハーネスの設計を自動化・進化させることを目指す。
2. 先行研究と比べてどこがすごい？
  • ハーネスの自動生成・進化を目的とした初のモデル
  • エージェントの性能向上において、モデル自体のスケーリングとは異なる「ハーネスインテリジェンス」という新しい次元を確立し、それを訓練可能、転移可能、複合的な能力として提案した。
  • 既存のLLMエージェントの能力を飛躍的に向上
  • JIT-Agentをハーネスヘルパーとして利用することで、DeepSeek-V4-FlashがDeepSearchQAでGPT-5.6を上回るなど、様々な既存モデルの性能を大幅に改善した。
3. 技術や手法の肝はどこ？
  • 「ハーネスインテリジェンスモデル」としてのJIT-Agentの訓練
  • ハーネスを「構成可能で機械生成可能なアーティファクト」として形式化し、固定された4モジュールプロトコルで管理する。
  • JIT-Agentの3つの主要機能
  • 1. 特定のタスクに合わせてハーネスをカスタマイズする。
  • 2. 安定した信頼性の高い実行のためにハーネスを修復する。
  • 3. 過去のハーネス構成のアーカイブからパフォーマンス信号を蒸留し、自己進化する。
4. どうやって有効だと検証した？
  • 主要なベンチマークでの性能評価
  • DeepSearchQAとOdysseyBenchというベンチマークで、JIT-Agentを適用したDeepSeek-V4-FlashがGPT-5.6をそれぞれ+9.1ポイント、+4.3ポイント上回った。
  • GLM-5.2では最大+20.2ポイントの性能向上が見られた。
  • 幅広いモデルファミリーでの一貫した改善
  • DeepSeek V4、Mimo-V2.5、Qwen3.6といったマルチスケールモデルファミリー全体で、JIT-Agent生成ハーネスが一貫して性能を向上させた。
  • 成熟したエージェントランタイムとの比較
  • JIT-Agentが生成したハーネスは、OpenCodeやClaude Codeのような成熟したエージェントランタイムと同等の競争力のある性能を示した。
5. 議論はある？
  • アブストラクトからは直接的な議論や限界は読み取れないが、一般的に、ハーネスの「4モジュールプロトコル」の詳細や、自己進化のメカニズム、訓練データの収集方法、特定の複雑なタスクにおける汎用性や計算コストなどが今後の議論の対象になるだろう。
6. 次に読むべき論文は？
  • エージェントのプランニング、ツール利用、メモリ管理に関する論文
  • OpenCodeやClaude Codeなど、比較対象として挙げられている既存のエージェントランタイムに関する論文
  • 自己進化や蒸留を用いてエージェントの性能を向上させる手法に関する論文

Abstract (原文)

Agent capability is not determined by the model alone. The agent harness, encompassing memory management, planning strategy, action protocol, and tool/skill orchestration, can dominate the contribution of the underlying foundation model. Yet harness design remains manual, task-specific, and fundamentally unscalable. We present JIT-Agent, a harness intelligence model trained to synthesize task-adaptive agent harnesses on the fly for arbitrary off-the-shelf agentic LLMs. We formalize the agent harness as a composable, machine-generatable artifact governed by a fixed four-module protocol, and train JIT-Agent to customize harnesses for a given task at hand, repair harnesses for stable and reliable execution, and self-evolve by distilling performance signals from an expanding archive of prior harness configurations. Equipped with JIT-Agent as a harness helper, DeepSeek-V4-Flash surpasses GPT-5.6 on DeepSearchQA (+9.1) and OdysseyBench (+4.3), while the already strong GLM-5.2 gains up to +20.2 points. Across controlled evaluations, JIT-Agent-generated harnesses are performance-competitive with mature agent runtimes such as OpenCode and Claude Code and consistently improve multi-scale model families of DeepSeek V4, Mimo-V2.5, and Qwen3.6. To our knowledge, JIT-Agent is the first model purpose-built for just-in-time harness generation, establishing harness intelligence as a trainable, transferable, and compounding dimension of agent capability orthogonal to model scaling.

📄 arxiv ページ 📑 PDF ⭐ GitHub (121 stars)