InformedXRD: 분말 회절 대칭성 분류를 위한 재현 가능한 벤치마크와 물리 기반 평가
InformedXRD: Reproducible Benchmarks and Physics-Informed Evaluation for Powder Diffraction Symmetry Classification
한국어 초록
분말 회절(PXRD) 대칭성 분류를 위한 기계학습이 대규모로 훈련되고 있으나, 이 분야에는 공통된 평가 표준이 없다. 논문마다 실험 아카이브의 서로 다른 부분집합, 서로 다른 목표 분류 체계, 전처리, 지표로 결과를 보고하며, 공개된 모델은 재채점이 가능한 형태로 배포되는 경우가 드물다. 본 논문은 세 부분으로 구성된 평가 프레임워크 InformedXRD를 제시한다. (i) 230개 공간군을 99개 소멸군(systematic absence만으로 분말 회절이 식별할 수 있는 가장 세밀한 부류)으로 대응시키는 기계 판독 가능한 매핑, (ii) 포함 규칙이 코드로 명시되고 고정된 스냅샷으로부터 재현되는 벤치마크 구축 방법으로, RRUFF-473, RRUFF-325, 그리고 소규모 예시로서 opXRD-98로 구현되었다, (iii) 사전확률 기반 빈도 기준선, 레이블 순열 검정, 압축된 translationengleiche 부분군 그래프 위의 계층 인식 오류 지표, 층화 평가로 이루어진 보고 프로토콜이다. 우리는 선행 연구(Baggett et al., 2026)에서 공개한 매핑, RRUFF 벤치마크, 부분군 그래프, 네 개의 ViT 체크포인트를 기반으로 한다. 이 체크포인트들, 1D 잔차 CNN, 그리고 XRDBench 레시피(Cao et al., 2025)로 훈련한 여섯 가지 아키텍처를 사용하여, 평가 설계가 어떤 결론이 정당화되는지를 바꾼다는 점을 보인다. 쌍체 검정은 Top-1과 Top-5에서 서로 다른 방향을 가리킨다. 쌍체 Top-k 검정은 XRDBench의 상위 세 모델을 구분하지 못하는 반면, 계층 인식 분석은 여섯 모델 전체에 걸쳐 오류의 거리와 방향을 설명한다. 입력을 보지 않는 빈도 예측기는 집계 Top-k에서 모델과 대등하지만, 레이블 순열 검정은 여전히 패턴 특이적 증거를 검출한다. 또한 층화 분석은 집계 정확도가 가리는 레이블 엔트로피 교란을 드러낸다. 모든 매핑 표, 벤치마크 코드, 스크립트, 체크포인트는 PXRD-ML 평가를 위한 공유 인프라로 공개한다.
원문 초록
Machine learning for powder diffraction (PXRD) symmetry classification is being trained at scale, yet the field lacks a common evaluation standard: papers report results on different subsets of experimental archives, with different target taxonomies, preprocessing, and metrics, and published models are rarely released in a form that permits rescoring. We present InformedXRD, an evaluation framework with three parts: (i) a machine-readable mapping from 230 space groups to 99 extinction groups, the finest classes powder diffraction can identify from systematic absences alone; (ii) a benchmark-construction method whose inclusion rules are specified as code and reproduce from a frozen snapshot, instantiated as RRUFF-473, RRUFF-325, and, as a small example, opXRD-98; (iii) a reporting protocol with prior-only frequency baselines, a label-permutation test, a hierarchy-aware error metric on the condensed translationengleiche subgroup graph, and stratified evaluation. We build on the mapping, RRUFF benchmarks, subgroup graph, and four ViT checkpoints released in our earlier work (Baggett et al., 2026). Using these checkpoints, a 1D residual CNN, and six architectures trained under the XRDBench recipe (Cao et al., 2025), we show that evaluation design changes what conclusions are justified: paired tests point in different directions at Top-1 and Top-5; paired Top-k tests do not separate the three leading XRDBench models, while hierarchy-aware analysis describes error distance and direction across all six; an input-blind frequency predictor matches the models on aggregate Top-k, yet a label-permutation test still detects pattern-specific evidence; and stratified analysis exposes a label-entropy confound that aggregate accuracy hides. All mapping tables, benchmark code, scripts, and checkpoints are released as shared infrastructure for PXRD-ML evaluation.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.01525v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.