arXiv:2609.01783v1 stat.ME

혼합 영역 데이터를 갖는 비정규화 모델에 대한 강건한 베이지안 추론

Robust Bayesian Inference for Unnormalized Models with Mixed-Domain Data

Jiongran Wang, Debdeep Pati, Anirban Bhattacharya

제출 2026-09-01

한국어 초록

많은 통계 모델은 계산상 다루기 어려운, 매개변수에 의존하는 정규화 상수를 포함하여 표준 베이지안 추론에 상당한 장애가 된다. 기존 가능도 기반 알고리즘은 이러한 상수를 종종 우회할 수 있지만, 모델 오지정(model misspecification) 하에서는 불확실성 정량화가 잘못 보정될 수 있다. 이를 해결하기 위해 우리는 score matching 추정 방정식과 베이지안 지수 기울임 경험적 가능도(Bayesian exponentially tilted empirical likelihood)를 결합한 반모수 베이지안 프레임워크인 SME-BETEL을 제안한다. 이로 얻어진 사후분포는 정규화 상수를 계산하지 않으며 학습률(learning rate) 보정이 필요하지 않다. 우리는 score matching 추정량의 일치성(consistency)과 점근 정규성(asymptotic normality)을 확립하고, SME-BETEL 사후분포에 대한 Bernstein-von Mises 정리를 증명한다. 이 결과는 SME-BETEL 신뢰 집합(credible set)이 score matching 추정량의 표본 변동성에 점근적으로 보정(calibrated)됨을 보여 주며, 모델 오지정 하에서도 유효한 빈도주의적 포함률(frequentist coverage)을 제공한다. 또한 혼합 영역(mixed-domain) 데이터를 위한 새로운 score matching 기준을 개발하여, 관측치가 서로 다른 표본 공간(sample space)의 성분을 결합하는 모델로 SME-BETEL을 확장한다. 이 구성은 다루기 어려운 공간 정규화 적분을 갖는 preferential sampling 모델을 포함해, 혼합 영역 이중 난해(doubly-intractable) 모델에 대한 강건한 베이지안 추론을 가능하게 한다. 시뮬레이션 연구는 SME-BETEL이 올바른 모델 지정 하에서는 경쟁력을 유지하고, 오지정 하에서는 불확실성 정량화를 크게 개선함을 보여 준다. 오존 모니터링 응용은 공간 preferential modeling에 혼합 영역 구성이 유용함을 추가로 보여 준다.

원문 초록

Many statistical models involve parameter-dependent normalizing constants that are computationally intractable, creating substantial obstacles to standard Bayesian inference. Although existing likelihood-based algorithms can often circumvent these constants, their uncertainty quantification may be poorly calibrated under model misspecification. To address these challenges, we propose SME-BETEL, a semiparametric Bayesian framework that combines score matching estimating equations with Bayesian exponentially tilted empirical likelihood. The resulting posterior avoids evaluation of normalizing constants and does not require learning-rate calibration. We establish consistency and asymptotic normality of the score matching estimator, and prove a Bernstein-von Mises theorem for the SME-BETEL posterior. These results show that SME-BETEL credible sets are asymptotically calibrated to the sampling variability of the score matching estimator, yielding valid frequentist coverage under model misspecification. We further develop a new score matching criterion for mixed-domain data, extending SME-BETEL to models whose observations combine components from different sample spaces. This construction enables robust Bayesian inference for mixed-domain doubly-intractable models, including preferential sampling models with an intractable spatial normalizing integral. Simulation studies show that SME-BETEL remains competitive under correct specification and substantially improves uncertainty quantification under misspecification. An ozone-monitoring application further demonstrates the utility of the mixed-domain construction for spatial preferential modeling.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2609.01783v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.