행간을 읽다: 다중 턴 맥락 기반 투자 조언 탐지
Between the Lines: Multi-turn Contextual Investment Advice Detection
한국어 초록
대규모 언어 모델(LLM)이 금융 대화형 어시스턴트를 점점 더 많이 구동함에 따라, 자연어에서 투자 조언을 탐지하는 것은 중요한 규제 및 안전 과제가 되었다. 명시적인 단일 턴 추천과 달리, 투자 조언은 사용자 의도, 전달 방식, 맥락의 누적에 따라 다중 턴 대화에 걸쳐 암묵적이고 점진적으로 나타나는 경우가 많다. 본 논문은 대화 환경에서 순차적 투자 조언과 맥락적 투자 조언을 모두 탐지하기 위한 최초의 포괄적 프레임워크를 소개한다. 우리 접근법의 핵심은 축-버킷-기술자 스키마를 사용하여 조언 궤적의 분류 체계를 체계적으로 포괄하는 모듈식 하향식 합성 데이터 생성 파이프라인이다. 다양한 사용자 페르소나, 금융 상품, 위험 등급에 걸쳐 무해한 대화와 고위험 대화를 모두 시뮬레이션하고, 엔트로피 기반 불확실성 진단을 갖춘 LLM-as-a-Judge로 탐지 능력을 평가한다. 결과는 맞춤형 시연을 사용한 퓨샷 프롬프팅에서도 맥락적 조언 탐지가 순차적 사례보다 훨씬 더 어렵다는 것을 보여준다. 본 연구는 조언의 위험이 흔히 미묘하고 분산되어 있으며 인식에 좌우되는, 고위험·규정 준수 민감 분야에서 확장 가능한 가드레일을 개발하기 위한 토대를 마련한다.
원문 초록
As large language models (LLMs) increasingly power financial conversational assistants, detecting investment advice in natural language has become a critical regulatory and safety challenge. Unlike explicit single-turn recommendations, investment advice often emerges implicitly and progressively over multi-turn conversations, shaped by user intent, delivery style, and contextual buildup. We introduce the first comprehensive framework for detecting both sequential and contextual investment advice in dialogue settings. Central to our approach is a modular, top-down synthetic data generation pipeline that systematically spans a taxonomy of advisory trajectories using an axis-bucket-descriptor schema. We simulate both benign and high-risk conversations across diverse user personas, financial instruments, and risk tiers, and evaluate detection capabilities using LLM-as-a-Judge with entropy-based uncertainty diagnostics. Our results show that contextual advisory detection remains substantially more challenging than sequential cases, even under few-shot prompting with tailored demonstrations. This work lays the foundation for scalable guardrail development in high-stakes, compliance-sensitive domains, where advisory risk is often subtle, distributed, and perception-dependent.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.18596v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.