PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.17871v1cs.AI

StepGuard: 단일 단계 보정을 통한 웹 탐색 가드

StepGuard: Guarding Web Navigation via Single-Step Calibration

웹 탐색은 에이전트가 자연어 목표를 따르고, 웹 페이지와 상호작용하며, 정확한 답변을 생성해야 한다. 최근 비전-언어 모델과 강화학습을 활용한 발전에도 불구하고, 기존 방법은 보상 불일치와 오류 전파로 인해 단일 단계 취약성을 여전히 겪는다. 보상 얽힘을 해결하기 위해, 우리는 DDPO(Dynamic Dual-Policy Optimization)를 설계한다. 이는 탐험을 위한 내비게이션 우선 모드와 질의응답을 위한 답변 우선 모드 사이를 동적으로 전환하여 보상 충돌을 완화한다. 단일 단계 오류를 보정하기 위해, 우리는 CANR(Confidence-Guided Adaptive Navigation Reflection)을 제안한다. 이는 단계별 신뢰도를 추정하고, 필요할 때만 리플렉션을 트리거하며, 대조 보상을 사용해 자기 수정을 유도하여 단일 단계 부정확성을 보정하는 메커니즘이다. 위를 주요 구성 요소로, 우리는 마침내 StepGuard를 개발한다. 이는 단일 단계 보정을 통한 웹 탐색 가드를 목표로 하는 새로운 프레임워크이다. 실험 결과, 우리 접근법은 탐색 및 답변 정확도를 크게 향상시키며, 표준 웹 탐색 벤치마크에서 새로운 최첨단 성능을 기록한다.