PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.24004v1cs.CL

Towards Spec Learning: Inference-Time Alignment from Preference Pairs

간단한 사용자 지시와 소량의 선호 쌍을 자연어 명세(specification) 프롬프트로 컴파일해 추론 시점에 대규모 언어 모델(LLM)을 조건화하는 spec learning 프레임워크를 제안하며, 기본 모델 파라미터를 갱신하지 않아도 선호 신호가 밀집된 전문 도메인에서는 직접 선호 최적화(DPO)보다 나은 응답을 내는 경우가 많다. 생성된 명세는 사람이 읽을 수 있어 선호 신호를 해석 가능하고 투명하게 드러낸다.