PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2510.19771v4cs.AI

반응성을 넘어서: LLM 에이전트의 능동적 문제 해결 능력 측정

Beyond Reactivity: Measuring Proactive Problem Solving in LLM Agents

LLM 에이전트의 능동적 문제 해결 능력을 평가하기 위해 PROBE(Proactive Resolution Of BottlEnecks) 벤치마크를 제안하며, 이는 미명시 문제 탐색, 병목 식별, 적절한 조치 실행의 세 단계로 능동성을 분해한다. 1,000개의 합성 직장 시나리오로 구성된 이 벤치마크에서 GPT-5와 Claude Opus-4.1이 최고 성능인 40%를 기록하며, 현재 최신 모델조차 진정한 자율적 에이전트 행동에 한계가 있음을 드러낸다.