arXiv:2607.13683v2 cs.CL

HarnessBank: 에이전트 하네스 자기 진화를 위한 게이트 검증 기반 시맨틱 유전자 은행 탐색

HarnessBank: Semantic Gene-Bank Search with Gated Verification for Agent-Harness Self-Evolution

Xiaotian Luo, Dizhan Xue, Fengxingyu Wang, Chuanrui Hu, Yafeng Deng

제출 2026-07-15

한국어 초록

대규모 언어 모델(LLM)은 다양한 응용 분야에서 역량 있는 에이전트(agent) 개발을 가능하게 했습니다. 파운데이션 모델을 넘어, 에이전트의 성능은 프롬프트, 도구, 제어 루프 등을 포함한 주변 에이전트 하네스(harness)에 의해 결정됩니다. 이러한 하네스를 자동으로 진화시키는 것은 에이전트 향상을 위한 유망한 경로를 제공하지만, 기존 접근 방식은 일반적으로 탐욕적(greedy) 후보 선택과 노이즈가 있는 자체 생성 피드백에 의존하므로 탐색 붕괴, 태스크별 과적합(overfitting), 낮은 검증 가능성에 취약합니다. 이러한 문제를 해결하기 위해, 본 논문에서는 반복적인 실패 진단, 하네스 생성, 진화 검증을 위해 태스크 에이전트와 별도의 진화자(evolver) 에이전트를 결합하는 신뢰할 수 있는 에이전트 하네스 자기 진화 프레임워크인 HarnessBank를 소개합니다. HarnessBank는 다양한 시맨틱 좌표의 고성능 하네스로 구성된 하네스 유전자 은행(Harness Gene Bank)을 유지합니다. 이러한 하네스는 자기 진화 과정 동안 재창안, 재조합, 선별 및 선택됩니다. 또한, 고품질 하네스를 효율적으로 필터링하고 수많은 자손 하네스 평가 비용을 절감하기 위한 게이트 하네스 선별(Gated Harness Screening) 메커니즘을 제안합니다. 7개의 에이전트 벤치마크 전반에서 HarnessBank는 5.1%에서 15.4%에 이르는 일관된 성능 향상을 보입니다. 교차 모델(cross-model) 실험은 이러한 성능 향상이 보편적으로 최적인 하네스가 아닌 모델(model)별 자기 진화 과정에서 비롯됨을 추가로 검증합니다. 코드는 논문 수락 시 공개될 예정입니다.

원문 초록

Large Language Models (LLMs) have enabled capable agents across diverse applications. Beyond the foundation model, the performance of an agent is governed by the surrounding agent harness, including prompts, tools, control loops, etc. Automatically evolving this harness offers a promising pathway to agent improvement, yet existing approaches typically rely on greedy candidate selection and noisy self-generated feedback, rendering their gains susceptible to search collapse, task-specific overfitting, and poor verifiability. To tackle these challenges, we introduce HarnessBank, a trustworthy agent-harness self-evolution framework that pairs a task agent with a separate evolver agent for iterative failure diagnosis, harness generation, and evolution verification. HarnessBank maintains a Harness Gene Bank composed of high-performing harnesses of different semantic coordinates. Those harnesses are reinvented, recombined, screened, and selected during the self-evolution procedure. Moreover, we propose a Gated Harness Screening mechanism to efficiently filter high-quality harnesses and reduce the cost of evaluating numerous offspring harnesses. Across seven agent benchmarks, HarnessBank produces consistent performance improvements from 5.1% to 15.4%. Cross-model experiments further verify that the improvements come from the model-specific self-evolving process, instead of a universally optimal harness. Our code will be publicly available upon acceptance.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2607.13683v2제출 시각 미확인
  2. arXiv:2607.13683v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.