arXiv:2611.22525v1 cs.AI

에이전트 스킬이 오래되면: 변화하는 환경에서의 실행 동작과 선택적 유지보수

When Agent Skills Go Stale: Runtime Behavior and Selective Maintenance in Evolving Environments

\"Omer Faruk Akg\"ul, Shuli Jiang, Yuting Zhang, Yi Zhang, Xiaohan Fei, Wei Xia, Stefano Soatto

제출 2026-11-18

한국어 초록

에이전트 스킬은 과거 경험과 현재 관측을 바탕으로 관련 과제의 결정과 행동을 안내한다. 과거 경험은 스킬 상태에 저장되며, 이를 재사용하면 추론 시의 추론 연산과 환경 상호작용 비용을 여러 작업에 나눌 수 있다. 환경이 바뀌면 스킬 상태의 일부는 오래되어 쓸모가 떨어지고 다른 부분은 여전히 유용할 수 있다. 과제 설정 네 가지와 모델 두 개에서 환경이 바뀌기 전후에 스킬을 재사용한 결과를 비교했다. 이전에 유용했던 스킬도 스킬을 쓰지 않을 때보다 과제 성능을 10%포인트 넘게 낮추거나 실행 비용을 거의 40% 늘릴 수 있었다. 과제 성공률이 그대로여도 실행 비용 절감 폭은 줄어들 수 있었다. 이런 효과는 환경에 종속된 어떤 세부 사항이 오래됐는지, 에이전트가 현재 관측으로 차이를 얼마나 보완할 수 있는지에 따라 달라졌다. 추가 모델 호출 없이 성공한 실행의 검사를 다시 수행하는 선택적 유지보수를 도입한다. 관찰한 차이가 스킬 상태와 충돌하는지 검증하고, 영향을 받은 내용을 고친 뒤 변경 결과를 검증한다. 국소 수정으로 충분하지 않으면 스킬을 다시 만든다. 변경 사항에 대한 별도 설명은 주어지지 않는다. 오래된 상태를 재사용할 때와 비교해 유지보수는 과제 정확도를 최대 67%포인트 높이고 실행 단계 수를 최대 37% 줄였다. 이 결과는 환경이 변해도 추론 시 스킬의 가치를 유지하려면 상태를 선택적으로 관리해야 함을 시사한다.

원문 초록

Agent skills use past experience and current observations to guide decisions and actions on related tasks. This experience is retained in skill state, whose reuse can amortize inference-time reasoning and environment interaction. When environment changes, parts of this state can become outdated while others remain useful. Across four task settings and two models, we compare skill reuse before and after environment changes. Previously beneficial skills can reduce task performance by over 10 percentage points or increase execution cost by nearly 40% relative to no skill. Task success can also remain unchanged while execution savings decline. These effects depend on which environment-specific details become outdated and the agent's ability to compensate using current observations. We introduce selective maintenance, which replays checks from successful executions without additional model calls. It verifies whether observed differences conflict with skill state, repairs affected content, and validates updates, rebuilding when local repair is insufficient. No description of the change is supplied. Relative to reusing stale state, maintenance improves task accuracy by up to 67pp and reduces execution steps by up to 37%. These results suggest that preserving a skill's inference time value as environments evolve requires selectively maintaining its state.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.22525v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.