의미 클러스터 ID와 전문가 지도 강화학습을 이용한 전자상거래 검색용 효율적 생성형 검색
Efficient Generative Retrieval for E-commerce Search with Semantic Cluster IDs and Expert-Guided RL
한국어 초록
생성형 검색은 분절된 다단계 검색 과정을 단일 종단 간 모델로 통합하는 유망한 대안을 제공한다. 그러나 방대하고 동적인 상품 카탈로그, 엄격한 지연 시간 요구 사항, 검색을 하위 랭킹 목표와 정렬해야 할 필요성을 고려할 때, 산업용 전자상거래 검색에서의 실제 도입은 여전히 어렵다. 본 연구에서는 생성형 검색을 종단 간 대체가 아닌 리콜 단계의 보완으로 위치시키는, 실제 리콜 시나리오에 맞춘 검색 프레임워크를 제안한다. 우리의 방법인 CQ-SID(Category-and-Query constrained Semantic ID)는 카테고리 인식 및 쿼리-아이템 대조 학습과 잔차 양자화 VAE를 사용하여 아이템을 계층적 의미 클러스터 식별자로 인코딩함으로써 빔 서치 복잡도를 크게 줄인다. 또한 정답 샘플을 주입하여 학습을 안정화함으로써 희소 보상 하에서 생성형 리콜을 하위 랭킹과 정렬하는 강화학습 접근법인 EG-GRPO(Expert-Guided Group Relative Policy Optimization)를 개발하였다. TmallAPP 검색 로그에 대한 오프라인 실험에서 CQ-SID는 RQ-VAE 베이스라인 대비 의미적 클릭 적중률과 개인화 클릭 적중률에서 각각 최대 26.76%와 11.11%의 상대적 향상을 달성하면서 빔 서치 크기를 절반으로 줄였다. EG-GRPO는 다목적 성능을 추가로 향상시킨다. 온라인 A/B 테스트에서는 GMV(+1.15%)와 UCTCVR(+0.40%)의 향상이 확인되었다. 생성형 리콜 채널은 현재 실서비스에서 노출의 50.25% 이상, 클릭의 58.96%, 구매의 72.63%를 차지하며 상당한 기여를 하고 있고, 이는 실제 전자상거래 시스템에 생성형 검색을 배포하는 실행 가능한 경로를 보여준다.
원문 초록
Generative retrieval offers a promising alternative by unifying the fragmented multi-stage retrieval process into a single end-to-end model. However, its practical adoption in industrial e-commerce search remains challenging, given the massive and dynamic product catalogs, strict latency requirements, and the need to align retrieval with downstream ranking goals. In this work, we propose a retrieval framework tailored for real-world recall scenarios, positioning generative retrieval as a recall-stage supplement rather than an end-to-end replacement. Our method, CQ-SID (Category-and-Query constrained Semantic ID), employs category-aware and query-item contrastive learning along with Residual Quantized VAEs to encode items into hierarchical semantic cluster identifiers, significantly reducing beam search complexity. Additionally, we develop EG-GRPO (Expert-Guided Group Relative Policy Optimization), a reinforcement learning approach that aligns generative recall with downstream ranking under sparse rewards by injecting ground-truth samples to stabilize training. Offline experiments on TmallAPP search logs show that CQ-SID achieves up to 26.76% and 11.11% relative gains in semantic and personalized click hitrate over RQ-VAE baselines, while halving beam search size. EG-GRPO further improves multi-objective performance. Online A/B tests confirm gains in GMV (+1.15%) and UCTCVR (+0.40%). The generative recall channel now contributes substantially in production, accounting for over 50.25% of exposures, 58.96% of clicks, and 72.63% of purchases, demonstrating a viable path for deploying generative retrieval in real-world e-commerce systems.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2605.14434v2제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.