arXiv:2608.26283v1 cs.DC

분산 생성형 AI를 활용한 다중 데이터셋 역문제 해결

Multi-Dataset Inverse Problem Solving with Distributed Generative AI

Daniel Lersch, Steven Goldenberg, Johann Rudi, Markus Diefenthaler, Kevin Brager, Xingfu Wu, Yaohang Li, Nobuo Sato

제출 2026-08-26

한국어 초록

직접 측정할 수 없는 공유된 미지의 양을 이종의 다중 데이터셋으로부터 추출하는 것은 여러 과학 분야에 걸친 공통된 과제입니다. 대표적인 예로 서로 다른 설정(예: 다양한 검출기 해상도)을 가진 서로 다른 측정에서 얻은 데이터셋의 결합을 들 수 있습니다. 이러한 데이터셋을 독립적으로 분석하거나 단순 병합한 후 분석하기보다 공동으로 분석하는 것은 미지수에 대한 정밀하고 편향 없는 추정치를 얻는 데 필수적이지만, 데이터셋의 이종성을 신중하게 다뤄야 하며 많은 계산량을 요구합니다. 본 논문에서는 생성형 AI 기반 역문제 해결기의 맥락에서 여러 이종 데이터셋을 동시에 분석하기 위한 일반화된 프레임워크를 제시합니다. 최근 개발된 자사의 Scalable Asynchronous Generative Inverse Problem Solver(SAGIPS) 프레임워크를 기반으로 하여, 널리 확립된 분산 데이터 병렬 학습 패러다임을 동일하지 않은 분포를 갖는 데이터셋으로 확장합니다. 여기서 각 데이터셋은 동일한 미지의 추론 매개변수 집합에 의해 제어되지만 가용한 특징 공간의 서로 다른 영역을 포괄합니다. 각 데이터셋은 고유한 순방향 연산자와 판별자(discriminator)를 통해 처리되어 상호보완적인 제약 조건을 제공하며, 이는 공유된 생성자(generator)가 전역적 매개변수 일관성을 갖도록 공동으로 유도합니다. 다중 검출기 산란 실험에서 영감을 얻은 제어된 설정을 사용하여 이 접근 방식을 검증합니다. 러더퍼드(Rutherford) 실험의 미지 검출기 계통 오차로 인해 발생하는 다양한 데이터 충실도에 대해 본 프레임워크가 강건함을 수치적 증거로 제시하며, 멀티 GPU 리더십 컴퓨팅 시스템에서의 스케일링 거동을 보여줍니다. 결과는 본 접근 방식이 측정 전반에 걸쳐 실험 조건이 달라지는 실제 다중 데이터셋 분석에 매우 적합함을 보여줍니다.

원문 초록

Extracting a shared set of unknown, not directly measurable quantities from multiple, heterogeneous datasets is a common challenge across scientific domains. A prominent example is the combination of datasets obtained from different measurements with different settings (e.g. varying detector resolutions). Analyzing such datasets jointly, rather than independently or after naive merging, is essential for obtaining precise and unbiased estimates of the unknowns, but requires careful treatment of dataset heterogeneity and is computationally demanding. We present a generalized framework for simultaneously analyzing multiple heterogeneous datasets in the context of generative AI-based inverse problem solvers. Building on our recent Scalable Asynchronous Generative Inverse Problem Solver (SAGIPS) framework, we extend the well-established distributed data-parallel training paradigm to non-identically distributed datasets, where each dataset is controlled by the same set of unknown inference parameters but covers a different region of the available feature space. Each dataset is processed through its own forward operator and discriminator, providing complementary constraints that collectively guide a shared generator toward global parameter consistency. We validate the approach using a controlled setup inspired by a multi-detector scattering experiment. We provide numerical evidence that our framework is robust to different data fidelities, which arise from unknown detector systematics in the Rutherford experiment, and we show the scaling behavior on multi-GPU leadership computing systems. The results show that our approach is well suited for real-world multi-dataset analyses in which experimental conditions vary across measurements.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.26283v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.