PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2607.01235v1cs.CL

TokenScope: Token-Level Explainability and Interpretability for Code-Oriented Tasks in Large Language Models

TokenScope는 디코더 기반 대규모 언어 모델(LLM)의 코드 생성 과정에서 토큰(token)별 신뢰도, 엔트로피(entropy), 어텐션(attention) 패턴 등 디코딩 시점의 세밀한 신호를 실시간으로 노출하는 인터랙티브 해석 가능성(interpretability) 도구다. 추상 구문 트리(AST) 기반의 코드 구조 분석과 반사실적(counterfactual) 분기 생성을 통합하여, 연구자와 실무자가 LLM의 코드 생성 동작을 체계적으로 진단하고 탐색할 수 있도록 한다.