JIT-Agent: 적시 하네스 진화를 통한 하네스 지능 스케일링
JIT-Agent: Scaling Harness Intelligence via Just-in-Time Harness Evolution
한국어 초록
에이전트 능력은 모델만으로 결정되지 않는다. 메모리 관리, 계획 전략, 행동 프로토콜, 도구/스킬 오케스트레이션을 포괄하는 에이전트 하네스(agent harness)가 기반 파운데이션 모델의 기여를 압도할 수 있다. 그러나 하네스 설계는 여전히 수동적이고 작업별이며 근본적으로 확장 불가능하다. 우리는 임의의 상용 에이전트형 LLM에 대해 과제에 적응하는 에이전트 하네스를 즉석에서 합성하도록 학습된 하네스 지능(harness intelligence) 모델인 JIT-Agent를 제시한다. 우리는 에이전트 하네스를 고정된 4모듈 프로토콜로 규율되는 조합 가능하고 기계 생성 가능한 산출물로 형식화하고, JIT-Agent가 당면 과제에 맞게 하네스를 맞춤화하고, 안정적이고 신뢰할 수 있는 실행을 위해 하네스를 수리하며, 이전 하네스 구성의 확장되는 아카이브로부터 성능 신호를 지식 증류(distillation)하여 자기 진화하도록 학습한다. JIT-Agent를 하네스 헬퍼로 갖춘 DeepSeek-V4-Flash는 DeepSearchQA에서 GPT-5.6을 능가(+9.1)하고 OdysseyBench에서(+4.3) 능가하며, 이미 강력한 GLM-5.2는 최대 +20.2점 향상을 얻는다. 통제된 평가에서 JIT-Agent가 생성한 하네스는 OpenCode 및 Claude Code와 같은 성숙한 에이전트 런타임과 성능 면에서 경쟁력 있으며 DeepSeek V4, Mimo-V2.5, Qwen3.6의 다규모 모델군을 일관되게 개선한다. 우리가 아는 한 JIT-Agent는 적시 하네스 생성을 위해 목적에 맞게 구축된 최초의 모델이며, 하네스 지능을 모델 스케일링과 직교하는 학습 가능하고 전이 가능하며 누적되는 에이전트 능력의 차원으로 확립한다.
원문 초록
Agent capability is not determined by the model alone. The agent harness, encompassing memory management, planning strategy, action protocol, and tool/skill orchestration, can dominate the contribution of the underlying foundation model. Yet harness design remains manual, task-specific, and fundamentally unscalable. We present JIT-Agent, a harness intelligence model trained to synthesize task-adaptive agent harnesses on the fly for arbitrary off-the-shelf agentic LLMs. We formalize the agent harness as a composable, machine-generatable artifact governed by a fixed four-module protocol, and train JIT-Agent to customize harnesses for a given task at hand, repair harnesses for stable and reliable execution, and self-evolve by distilling performance signals from an expanding archive of prior harness configurations. Equipped with JIT-Agent as a harness helper, DeepSeek-V4-Flash surpasses GPT-5.6 on DeepSearchQA (+9.1) and OdysseyBench (+4.3), while the already strong GLM-5.2 gains up to +20.2 points. Across controlled evaluations, JIT-Agent-generated harnesses are performance-competitive with mature agent runtimes such as OpenCode and Claude Code and consistently improve multi-scale model families of DeepSeek V4, Mimo-V2.5, and Qwen3.6. To our knowledge, JIT-Agent is the first model purpose-built for just-in-time harness generation, establishing harness intelligence as a trainable, transferable, and compounding dimension of agent capability orthogonal to model scaling.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.25593v2제출 시각 미확인
- arXiv:2608.25593v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.