Corpus2Skill: 질의응답 및 RAG를 위해 엔터프라이즈 지식을 탐색 가능한 에이전트 스킬로 증류하기
Corpus2Skill: Distilling Enterprise Knowledge into Navigable Agent Skills for QA and RAG
한국어 초록
검색-증강 생성(RAG)은 대규모 언어 모델(LLM)의 응답을 외부 근거에 그라운딩(grounding)하지만, 코퍼스가 어떻게 구성되어 있는지 또는 모델이 아직 보지 못한 내용이 무엇인지에 대한 조망 없이 모델을 검색 결과의 수동적인 소비자로 취급합니다. 본 논문에서는 엔터프라이즈 지식 베이스와 같이 범위가 한정되고 구조적 일관성을 갖춘 코퍼스를 위한 시스템 수준의 검색 아키텍처인 Corpus2Skill을 제안합니다. 오프라인 컴파일러가 코퍼스를 계층적 스킬 디렉터리로 증류하고, 서빙 시점에는 LLM 에이전트가 이를 탐색하여 조감도(bird's-eye view) 수준에서 점진적으로 더 세부적인 요약을 거쳐 문서에 이르기까지 드릴다운하며 특정 브랜치에서 성과가 없을 경우 백트래킹을 수행합니다. 엔터프라이즈 고객 지원 벤치마크에서 Corpus2Skill은 적당한 비용 트레이드오프 하에 싱글샷 밀집(dense), 하이브리드, 계층적 검색 및 에이전틱(agentic) RAG 베이스라인 대비 답변 품질과 그라운딩을 모두 향상시키며, 인코더를 일치시킨 통제 조건과 대응 표본 유의성 검정에서도 우위가 유지됩니다. 11개 데이터셋에 대한 연구는 코퍼스 탐색이 기존 검색을 완전히 대체하는 만능 해결책은 아님을 보여줍니다. 즉, 5개 데이터셋에서는 유의미하게 우세하고 3개에서는 동등하며 3개에서는 뒤처집니다. 이는 복원 가능한 주제별 분류 체계를 가진 단일 도메인 코퍼스에는 도움이 되지만, 상위 수준 클러스터링을 무력화하는 오픈 도메인 단문형 사실(factoid) 풀이나 동질적 표 형태의 코퍼스에서는 여전히 평탄형(flat) 검색이 선호됩니다. 우리는 이러한 적용 범위의 구분을 지식 기반 그라운딩 시스템을 위한 설계 가이드라인으로 규정합니다. 코드는 https://github.com/dukesun99/Corpus2Skill 에서 이용할 수 있습니다.
원문 초록
Retrieval-Augmented Generation (RAG) grounds LLM responses in external evidence but treats the model as a passive consumer of search results, with no view of how the corpus is organized or what it has not yet seen. We present Corpus2Skill, a system-level retrieval architecture for bounded, structurally coherent corpora such as enterprise knowledge bases: an offline compiler distills the corpus into a hierarchical skill directory, and at serve time an LLM agent navigates it, drilling from a bird's-eye view through progressively finer summaries down to documents and backtracking when a branch is unproductive. On an enterprise customer-support benchmark, Corpus2Skill improves both answer quality and grounding over single-shot dense, hybrid, hierarchical-retrieval, and agentic RAG baselines at a moderate cost tradeoff, and the lead persists under encoder-matched controls and paired significance tests. An eleven-dataset study shows that corpus navigation is not a universal replacement for retrieval: it significantly wins on five datasets, ties on three, and loses on three. It helps on single-domain corpora with a recoverable topical taxonomy, but flat retrieval remains preferable on open-domain factoid pools or homogeneous-tabular corpora that defeat top-level clustering. We characterize this scope distinction as a design guideline for knowledge-grounded systems. Code is available at https://github.com/dukesun99/Corpus2Skill.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2604.14572v4제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.