arXiv:2609.01622v1 cs.IR

RecEvolve: 추천 시스템을 위한 지식 기반 자율 에이전트 시스템

RecEvolve: A Knowledge-Driven Autonomous Agent System for Recommender Systems

Weidi Pan, He Ma, Shuhao Ye, Palaksh Rungta, David McPeek, Junyi Jiao, Arnab Bhadury, Mingyan Gao, Onkar Dalal

제출 2026-07-20

한국어 초록

에이전트적 AI(agentic AI)의 부상은 자기 반복(self-iterating) 시스템으로의 전환을 촉진하며, 프로덕션 추천 모델의 자율 최적화(optimization)를 위한 새로운 전선을 열었다. 본 논문은 프로덕션 대규모 Two-Tower 검색(retrieval) 모델에 직접 배포된 지식 기반 자율 에이전트 시스템의 경험적 검증을 제시한다. 아이디어 생성, 코드 구현, 오프라인 학습(training), 및 지표 평가(evaluation)에 이르는 전체 연구 수명주기를 지속적인 폐쇄 루프(closed-loop) 자율 프레임워크에 위임함으로써, 에이전트 시스템은 처음부터 40회 이상의 완료된 자율 학습 실행을 수행했다. 이 실행들을 엄격한 프로덕션 규모 평가 하에서 수행하면서, 시스템은 최신 프로덕션 모델의 숨겨진 아키텍처 병목을 체계적으로 탐색하여 NDCG에서 약 20% 상대적 개선이라는 돌파구를 달성했으며, 이는 라이브 프로덕션 트래픽에서 사용자 만족도 +3.77% 증가로 직접 이어졌다. 또한 배포 과정에서 에이전트 시스템이 보상 해킹(reward-hacking) 지름길을 자율적으로 발견하면서, 표준 평가 프로토콜의 치명적 취약점이 드러났다. 이 결과는 자율 파이프라인이 머신러닝 연구의 속도를 극적으로 가속하고 기반 실험 인프라의 엄밀성을 스트레스 테스트할 수 있음을 입증하며, 동시에 보상 해킹(reward hacking)과 실패한 가설의 중복 탐험(exploration)과 같은 새로운 과제도 드러낸다.

원문 초록

The rise of agentic AI has catalyzed a shift toward self-iterating systems, opening new frontiers for the autonomous optimization of production recommender models. This paper presents the empirical validation of a knowledge-driven autonomous agent system, deployed directly on a production large-scale Two-Tower retrieval model. By delegating the entire research lifecycle, spanning idea generation, code implementation, offline training, and metric evaluation, to a continuous closed-loop autonomous framework, the agent system executed over 40 completed autonomous training runs from scratch. Executing these runs under rigorous production-scale evaluations, the system systematically navigated hidden architectural bottlenecks on the latest production model to achieve a breakthrough ~20% relative improvement in NDCG, a gain that translated directly to a +3.77% increase in user satisfaction in live production traffic. Furthermore, the deployment exposed critical vulnerabilities in standard evaluation protocols, as the agent system autonomously discovered reward-hacking shortcuts. These findings prove that an autonomous pipeline can dramatically accelerate the pace of machine learning research and stress-test the rigorousness of underlying experimental infrastructure, while also exposing novel challenges such as reward hacking and redundant exploration of failed hypotheses.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2609.01622v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.