arXiv:2609.05059v1 cs.IR

반복 질의는 LLM의 브랜드 추천은 고갈시키지만 출처는 고갈시키지 않는다

Repeated Queries Exhaust an LLM's Brand Recommendations but Not Its Sources

Dmitrij Żatuchin

제출 2026-09-04

한국어 초록

동일한 구매 질문을 반복할 때 언어 모델의 브랜드 추천이 고갈되는지는 검색(retrieval) 여부에 달려 있다. 300개의 질문-엔진 셀(질문 50개, 엔진 6개, 각 15회 실행, 1,470개 판정된 조직에 대한 개방형 추출)에 걸쳐, 웹 검색 없이 답하는 다섯 엔진은 15회째 실행에서도 셀의 86–92%에서 한 번도 본 적 없는 브랜드를 계속 추가했으며, 조직 레퍼토리의 중앙값은 15–31개였다. 검색이 활성화된 한 엔진은 목록을 닫았다(조직 중앙값 8개, 셀의 64%에서 여전히 추가), 웹 검색 실행이 10회째에 포화에 도달했던 이전 네 개의 deep 셀과 일치했다. 인용 도메인 누적은 시험한 모든 시점에서 계속 증가했다. 네 개의 deep 셀은 24회째 실행에서도 도메인을 추가하고 있었고 관측된 Chao2 하한 추정치의 59–84%에 해당했으며, 검색 엔진의 breadth 셀 중 44%는 15회째 실행에서도 도메인을 추가하고 있었다. 단일 실행은 5회 실행 브랜드 집합의 62–77%를 보여 주며, 엔진 전반에서 질문 하나당 중앙값 38개 조직이 끌려 나오고 그중 중앙값 15개는 정확히 한 엔진에만 나타난다. 추정량은 exact rarefaction과 Chao2 richness이며, 병렬 고정 로스터 추출은 동일한 응답에서 평평한 곡선을 재현하므로, 로스터로 제한된 추적은 개방형 추출이 제거하는 평준화(plateau)를 인위적으로 만든다.

원문 초록

Whether repeated identical buying questions exhaust a language model's brand recommendations depends on retrieval. Across 300 question-engine cells (50 questions, six engines, 15 runs each, open extraction over 1,470 adjudicated organizations), the five engines answering without web search were still adding never-seen brands at run 15 in 86-92% of cells, with median repertoires of 15-31 organizations; the one retrieval-enabled engine closed its list (median 8 organizations, 64% of cells still adding), matching four earlier deep cells where web-search runs saturated by run ten. Cited-domain accumulation keeps rising at every horizon tested: four deep cells were still adding domains at run 24 with 59-84% of the Chao2 lower-bound estimate observed, and 44% of the retrieval engine's breadth cells were still adding domains at run 15. A single run shows 62-77% of the five-run brand set, and across engines the median question draws 38 organizations, of which a median of 15 appear in exactly one engine. Estimators are exact rarefaction and Chao2 richness; a parallel fixed-roster extraction reproduces flat curves on identical responses, so roster-bounded tracking manufactures plateaus that open extraction removes.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2609.05059v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.