arXiv:2611.22113v1 cs.AI

RegimeCouncil: 대규모 언어 모델 에이전트의 메모리 충돌 관리를 위한 쌍별 증거 라우팅

RegimeCouncil: Paired-Evidence Routing For Memory Conflict Governance In LLM Agents

Qingcan Kang, Mingyang Liu, Shixiong Kai, Tao Zhong, Mingxuan Yuan

제출 2026-11-18

한국어 초록

언어 에이전트는 장기 상호작용에서 장기 메모리를 활용해 응답을 개인화한다. 그러나 세상이 변하면서 저장한 사실이 자신도 모르게 낡고, 에이전트는 오래된 정보를 사용해 행동한 뒤 지연된 피드백으로 그 사용이 해로웠음을 알게 되는 경우가 많다. 메모리를 갱신하기 전에는 부정적 피드백을 어디까지 적용해야 할까? 같은 사실에 관한 향후 질의에서만 메모리 사용을 억제하는 지역 정책과, 저장된 다른 사실에도 적용하는 전역 정책이 있다. 기존 메모리 시스템은 설계할 때 두 범위 중 하나를 암묵적으로 고정한다. 정보의 유효성을 알 수 없고 피드백이 지연되는 상황에서 이 범위를 온라인으로 고르는 문제를 메모리 충돌 관리로 정식화하고, 고정 정책 하나만으로는 충분하지 않음을 증명한다. 이에 두 범위를 모두 자문 정책으로 보존하고 대규모 언어 모델의 재학습 없이 온라인으로 중재하는 경량 쌍별 증거 라우터 RegimeCouncil을 제안한다. 메모리를 사용한 응답과 메모리를 사용하지 않은 기준 응답의 비교 결과가 공개되면, 지역 자문 모듈은 질의에 나온 사실에 대한 최신 결과만 추적하고 전역 자문 모듈은 저장된 모든 사실의 최근 결과를 모은다. 상위 제어기는 사실 간 간섭을 피하려고 기본적으로 지역 자문 모듈을 따른다. 전역 집계의 최근 효용 우위가 엄밀히 양수가 될 때만 전역 자문 모듈로 전환하며, 피드백이 지연되어도 유한 시간 안에 전환할 수 있음을 보장한다. Qwen3-30B-A3B와 GPT-4o로 LongMemEval의 갱신 스트림 및 TempLAMA와 TAQA의 실제 시변 정보에서 평가했다. RegimeCouncil은 주요 정책 불일치 사례와 별도로 분리한 30가지 설정 모두에서 두 고정 범위 정책 중 더 나은 쪽보다 5.2~7.3점 높은 성능을 보였다. 제거 실험에서는 세 모듈 중 어느 하나를 빼도 정확도가 2~7점 낮아졌다.

원문 초록

Language agents rely on long-term memory to personalize responses across extended interactions, yet stored facts quietly go stale as the world changes, and an agent often learns that using memory hurt only through delayed feedback after acting on an outdated record. Before the memory store is updated, how far should that negative feedback propagate: should it suppress memory use only on future queries for that same fact (a local policy), or also across other stored facts (a global policy)? Existing memory systems implicitly fix one of these two sharing scopes at design time. We formulate this online scope choice under hidden validity and delayed feedback as memory conflict governance, and prove that neither fixed policy is sufficient on its own. We then propose RegimeCouncil, a lightweight paired-evidence router that retains both scopes as advisors and arbitrates between them online without retraining the LLM. Using revealed comparisons between answering with memory and answering without memory (the no-memory anchor), a Local Advisor tracks the latest outcome on the queried fact alone, while a Global Advisor pools recent outcomes across all stored facts. A Meta Governor follows the Local Advisor by default to avoid cross-fact interference and switches to the Global Advisor only when global pooling accumulates a strictly positive recent utility margin, guaranteeing finite-time switching under delayed feedback. Across LongMemEval update streams and real-world historical drift on TempLAMA and TAQA with Qwen3-30B-A3B and GPT-4o, RegimeCouncil outperforms the better fixed-scope policy by 5.2-7.3 points on primary disagreement episodes and across all 30 held-out settings, while ablations show that removing any of its three modules reduces accuracy by 2-7 points.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.22113v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.