실용적 호기심: 능동 추론을 통한 하이브리드 학습 및 최적화의 통합 프레임워크
Pragmatic Curiosity: A Unified Framework for Hybrid Learning and Optimization via Active Inference
한국어 초록
많은 공학 및 과학 워크플로는 비용이 큰 블랙박스 평가에 의존하며, 과제 성능을 향상시키는 동시에 불확실성을 줄여야 하는 순차적 의사결정을 요구한다. 베이지안 최적화(BO)와 베이지안 실험 설계(BED)는 각각 목표 지향적 최적화와 정보 탐색적 실험에 대해 강력하지만 대체로 분리된 처리 방식을 제공하므로, 학습과 최적화가 본질적으로 결합된 하이브리드 환경에 대한 지침은 제한적이다. 본 논문은 능동 추론을 통한 하이브리드 학습 및 최적화의 통합 프레임워크인 실용적 호기심(Pragmatic Curiosity, PraC)을 제안한다. PraC는 과제와 관련된 잠재 기호에 대한 정보 이득과 결과에 대한 기대 후회 기반 포텐셜을 맞바꾸는 방식으로 후보 질의를 평가한다. 이 정식화는 세 가지 운용상의 설계 선택, 즉 어떤 잠재 양을 명확히 할 것인지, 과제 가치를 후회로 어떻게 인코딩할 것인지, 정보 이득을 실용적 후회와 얼마나 강하게 교환할 것인지를 전면에 내세운다. 우리는 복잡도가 증가하는 세 가지 체제에서 PraC를 구현한다. 고정된 전역 기호와 알려진 하위 손실을 갖는 의사결정 지향 모니터링, 유도된 국소 기호와 변화하는 커버리지 목표를 갖는 표적 능동 탐색, 알려지지 않은 선호 하에서 계층적 후회 학습을 수행하는 복합 베이지안 최적화이다. 이러한 체제 전반에서 PraC는 하위 의사결정 위험을 줄이고, 핵심 결과 영역의 커버리지를 개선하며, 과제별 단계 규칙에 의존하지 않고 예측 구조와 선호 구조를 함께 학습한다.
원문 초록
Many engineering and scientific workflows rely on expensive black-box evaluations, requiring sequential decisions that must both improve task performance and reduce uncertainty. Bayesian optimization (BO) and Bayesian experimental design (BED) provide powerful but largely separate treatments of goal-directed optimization and information-seeking experimentation, leaving limited guidance for hybrid settings in which learning and optimization are intrinsically coupled. We propose Pragmatic Curiosity (PraC), a unified framework for hybrid learning and optimization via active inference. PraC evaluates candidate queries by trading information gain about a task-relevant latent symbol against an expected regret-based potential over outcomes. This formulation foregrounds three operational design choices: which latent quantity should be clarified, how task value is encoded as regret, and how strongly information gain should be exchanged against pragmatic regret. We instantiate PraC across three regimes of increasing complexity: decision-oriented monitoring with fixed global symbols and known downstream losses, targeted active search with induced local symbols and evolving coverage goals, and composite Bayesian optimization with hierarchical regret learning under unknown preferences. Across these regimes, PraC reduces downstream decision risk, improves coverage of critical outcome regions, and jointly learns predictive and preference structures without relying on task-specific staging rules.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2602.06104v3제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.