PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.12864v1cs.SE

문제 해결을 넘어서: 경쟁 프로그래밍에서 코드 생성, 해킹, 수리를 평가하는 UOJ-Bench

Beyond Problem Solving: UOJ-Bench for Evaluating Code Generation, Hacking, and Repair in Competitive Programming

대규모 언어 모델(LLM)의 문제 해결 능력뿐만 아니라 인간이 작성한 코드의 오류 식별 능력을 평가하기 위해 실제 온라인 저지 제출물을 기반으로 한 UOJ-Bench를 소개한다. 원샷 평가에서는 오류 식별에 한계가 있었으나 테스트 타임 스케일링을 통해 성공률을 90% 이상으로 높일 수 있음을 확인했다.