RefinementGuard: 숨겨진 에이전트-도구 실행을 위한 반례 기반 의미 자격 검증
RefinementGuard: Counterexample-Directed Semantic Qualification for Hidden Agent-Tool Execution
한국어 초록
도구 런타임은 에이전트가 선택한 연산을 숨겨진 병렬 그래프로 낮출 수 있으며, 이는 지연 시간과 컨텍스트를 줄이지만 의미 오역의 위험이 있다. 우리는 RefinementGuard를 소개한다. 이는 숨겨진 부수 효과가 있는 에이전트-도구 로어링에 대한 번역 검증(translation validation)을 산출물에 결합된 fail-closed 런타임 승인과 연결한 것이다. 자격 검증은 명시적인 부모 연산 의무 조건을 사용하여 격리된 상태에서 후보 그래프를 독립적인 참조와 비교한다. 우리는 통제된 저장소에서 버그 위치 파악과 패치 검증이라는 두 가지 저장소 수준 계약을 평가한다. 한 명의 사람이 판정한, 활성화된 비등가 개발/자격 검증 결함 100개 중에서 부모 의미 검증은 49/100을 기각한다(연산자 클러스터 부트스트랩 95% CI [33.7%, 64.8%]). 목표는 최대 변이 기각이 아니라 선택적 승인이다. 정확한 동일성 검사는 결함 100/100을 기각하지만 유효한 변형 60개도 모두 기각하는 반면, 의무 조건 기반 검증은 60/60을 승인하며, 그 잔여 누락 51건은 구체적인 명세상의 공백을 보여 준다. 고정된 분리 입력 분할에서 보류된 B2-B3 결과는 패치 변이체 21개가 구조적으로 실패하므로 위치 파악에 한정되며, B3는 위치 파악 결함 38/56을 기각한다. 통제된 비동기 지연 환경에서 위치 파악의 직렬/보호 중앙값 지연 시간 비율은 4.50배이고, 숨겨진 실행은 가시적 실행보다 부모에게 보이는 컨텍스트를 74.3% 적게 노출한다. 패치 검증은 입증된 속도 향상을 보이지 않으며, 지연이 없는 실행에서는 오버헤드가 드러난다. 따라서 종단 간 자격 검증은 위치 파악의 병렬성을 유지하면서 하위 계층의 누락을 탐지한다.
원문 초록
Tool runtimes can lower an agent-selected operation into a hidden parallel graph, reducing latency and context while risking semantic mistranslation. We introduce RefinementGuard: translation validation for hidden, effectful agent-tool lowerings, coupled to artifact-bound, fail-closed runtime admission. Qualification compares a candidate graph with an independent reference on isolated state using explicit parent-operation obligations. We evaluate two repository-level contracts, bug localization and patch validation, on controlled repositories. Among 100 activated, non-equivalent development/qualification faults adjudicated by one human, parent-semantic validation rejects 49/100 (operator-cluster bootstrap 95% CI [33.7%, 64.8%]). The objective is selective admission, not maximum mutation rejection: exact equality rejects 100/100 faults but also all 60 valid variants, whereas obligation-based validation accepts 60/60; its 51 residual misses identify concrete specification gaps. On a frozen disjoint input split, the held-out B2-B3 result is localization-only because 21 patch mutants fail structurally; B3 rejects 38/56 localization defects. In a controlled asynchronous-delay regime, the localization serial/guarded median-latency ratio is 4.50x, and hidden execution exposes 74.3% less parent-visible context than visible execution. Patch validation shows no demonstrated speedup; zero-delay runs expose overhead. End-to-end qualification thus detects lower-layer misses while preserving localization's parallelism.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.23611v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.