의사결정 인식 메모리 카드: 도구 사용 LLM 에이전트를 위한 반사실 영감 컨텍스트 선택 및 압축
Decision-Aware Memory Cards: Counterfactual-Inspired Context Selection and Compression for Tool-Using LLM Agents
현대의 대규모 언어 모델(LLM) 에이전트는 단순히 더 긴 컨텍스트가 필요한 것이 아니라, 행동 시점에 의사결정과 관련된 근거가 필요하다. 우리는 의사결정 인식 컨텍스트 선택을 연구한다. 검색된 파일, 테스트, 트레이스, 규칙, 메모리를 의미적 유사도만이 아니라 에이전트의 다음 행동에 대한 기대 효과로 순위를 매긴다. 우리는 반사실 영감 컨텍스트 층(CICL)을 제안한다. CICL은 인스턴스 컨텍스트 그래프를 구축하고, 후보 단위에 대한 의사결정 지향적 유틸리티를 추정하며, 선택된 근거를 유형화된 메모리 카드로 압축한다. 동일한 스키마는 호스팅 LLM 판사, 로컬 대리 모델, 또는 경량 ranker로 인스턴스화할 수 있어, 모델 선택에 걸쳐 선택 프로토콜을 감사 가능하게 한다. SWE-bench Verified 파일 검색 인스턴스 50건에서 BM25 상위 50 후보에 대한 Qwen3.6-Plus 재순위화는 hit@1을 0.58에서 0.78로, MRR@10을 0.634에서 0.790으로 개선하며, 2,500개 판단 모두 파싱 가능하다. 통제된 진단은 CICL이 행동에 중요한 근거를 식별함을 보여준다. 최고 유틸리티 의미 단위를 제거하면 F1이 0.245에서 0.000으로 감소한다. 선택 후 압축 모드에서 메모리 카드는 선택된 근거를 유지하면서 쿼리당 44.93 토큰을 절약한다. CICL은 도구 사용 에이전트를 위한 의사결정에 중요한 컨텍스트를 측정, 순위화, 압축하는 실용적 층을 제공한다. 코드는 https://github.com/stephen-guan-researcher/CICL 에서 이용 가능하다.