경험 기반 적응형 지침을 통한 에이전트의 강건한 도구 사용
Towards Robust Tool Use in Agents via Experience-Driven Adaptive Guidance
한국어 초록
에이전트(agent)의 성능 병목 현상은 점차 모델(model)의 역량 자체에서 실행 과정의 강건성(robustness)으로 이동하고 있습니다. 도구(tool)는 에이전트가 외부 환경과 상호작용하는 주요 인터페이스로서 중심적인 역할을 수행하지만, 기존 방법들은 다양한 런타임 환경에서 강건한 도구 사용을 보장하는 데 거의 집중하지 않았습니다. 이러한 문제를 해결하기 위해, 우리는 각 도구의 역량 한계와 모범 사례(best practice)를 포착하는 적응형 지침을 구축하고 개선하여 에이전트가 도구를 더욱 강건하고 효과적으로 사용할 수 있도록 지원하는 메커니즘인 ExpG를 제안합니다. ExpG는 세 단계로 구성됩니다: (1) 이전 실행 궤적에서 도구 호출 품질을 분석하고 다각적 귀인을 통해 구조화된 학습 가능 경험을 생성하는 경험 획득(experience acquisition), (2) 도움이 되지 않는 경험을 필터링하고 동치 관계 기반 방법으로 대표적인 경험을 선별하여 일반화 가능한 지침으로 요약함으로써 경험 풀의 유효성을 유지하는 경험 증류(experience distillation), (3) 향후 작업 해결 과정에서 해당 지침을 적응적으로 적용하는 경험 재사용(experience reuse)입니다. 광범위한 실험을 통해 ExpG가 도구 선택, 도구 호출, 응답 생성 작업 전반에 걸쳐 일관된 성능 향상을 가져오며, ExpG를 사용하지 않는 대형 에이전트보다 더 작은 에이전트가 우수한 성능을 발휘할 수 있음을 보여줍니다. 또한, ExpG는 도전적인 환경에서 특히 강력한 성능 향상을 달성하여 더욱 강건한 도구 사용을 향한 유망한 경로를 제시합니다. 우리의 코드, 실험 및 결과는 공개되어 있습니다.
원문 초록
The performance bottleneck of agents is increasingly shifting from model capability to the robustness of their execution processes. Tools play a central role as the primary interface through which agents interact with external environments, yet existing methods rarely focus on ensuring robust tool use across diverse runtime conditions. To address this problem, we propose ExpG, a mechanism that builds and refines adaptive guidance capturing each tool's capability boundaries and best practices, thereby enabling agents to use tools more robustly and effectively. ExpG consists of three phases: (1) experience acquisition, which analyzes tool invocation quality from historical execution trajectories, producing structured learnable experiences through multi-aspect attribution; (2) experience distillation, which keeps the experience pool effective by filtering unhelpful experiences, selecting representative ones with an equivalence-class-based method, and summarizing them into generalizable guidance; and (3) experience reuse, which applies the guidance adaptively during future task solving. Extensive experiments show that ExpG brings consistent improvements across the tool selection, tool calling, and response generation tasks, enabling smaller agents to outperform larger ones that do not use ExpG. Moreover, ExpG achieves particularly strong gains in challenging settings, suggesting a promising path toward more robust tool use. Our code, experiments, and results are available.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.03403v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.