arXiv:2608.21482v1 eess.IV

방글라데시 X선 영상 기반의 강건한 골절 분류를 위한 신뢰도 및 해부학적 일관성 인식 다중모달 학습

Reliability- and Anatomy-Consistency-Aware Multimodal Learning for Robust Fracture Classification from Bangladeshi Radiographs

Musa Tur Farazi, K G Subarno Bithi

제출 2026-08-21

한국어 초록

배경: 다중모달(multimodal) 골절 분류기는 환자 및 해부학적 메타데이터를 활용하여 성능을 향상할 수 있으나, 문맥 정보가 누락되거나 불일치할 경우 취약해질 수도 있습니다. 방법: 본 연구에서는 방글라데시의 OrthoFrac-XR 데이터셋에서 추출한 1,493장의 X선 영상을 대상으로 데이터 누수(leakage)를 방지한 연령, 성별, 뼈 종류, 좌우측(laterality) 정보를 활용하여 분석했습니다. ConvNeXt 이미지 인코더와 임상 다층 퍼셉트론(MLP)을 결합하기 위해 연결(concatenation), 후기 융합(late fusion), 신뢰도 게이트 기반 잔차 융합(reliability-gated residual fusion), 계층적 상태-위치 정식화를 적용했습니다. 또한 이미지 기반 해부학적 예측 결과가 기록된 뼈 종류와 불일치할 때 메타데이터의 보정을 감쇠하는 해부학적 일관성 게이트를 추가로 도입했습니다. 결과: 5겹(five folds) 교차 검증 및 3개의 시드에 걸쳐 계층적 잔차 융합은 매크로 F1 0.6046 ± 0.0279를 달성하여 이미지 단독 학습의 0.5727 ± 0.0270 대비 우수한 성능을 보였으며, 브리어 점수(Brier score)를 0.5239에서 0.4948로 개선했습니다. 5겹 견고성 실험에서 해부학적 일관성 융합은 정제 데이터에서의 매크로 F1은 더 낮았으나, 메타데이터가 뒤섞인 조건에서 일반 잔차 융합 대비 매크로 F1 손실을 0.0567에서 0.0203으로 줄였습니다. 추론 시 뼈 종류 정보가 없는 경우, 보조 해부학적 감독을 통해 매크로 F1을 0.5620 ± 0.0330에서 0.5899 ± 0.0289로 향상했습니다. 결론: 구조화된 문맥 정보는 골절 분류 성능을 향상하며, 일관성 인식 게이팅은 불일치 메타데이터로 인한 악영향을 제한합니다. 관찰된 정제 데이터 성능과 강건성 간의 트레이드오프 및 환자 수준 식별자의 부재는 외부 및 전향적 검증의 필요성을 시사합니다.

원문 초록

Background: Multimodal fracture classifiers may benefit from patient and anatomical metadata, but they can also become brittle when contextual information is missing or mismatched. Methods: We studied 1493 radiographs from the Bangladeshi OrthoFrac-XR dataset using leakage-safe age, sex, bone type, and laterality. A ConvNeXt image encoder was combined with a clinical multilayer perceptron through concatenation, late fusion, reliability-gated residual fusion, and a hierarchical state-location formulation. We additionally introduced an anatomy-consistency gate that attenuates metadata corrections when an image-side anatomical prediction disagrees with the reported bone type. Results: Across five folds and three seeds, hierarchical residual fusion achieved a macro-F1 of 0.6046 +/- 0.0279, compared with 0.5727 +/- 0.0270 for image-only learning, while improving the Brier score from 0.5239 to 0.4948. In a five-fold robustness experiment, anatomy-consistency fusion reduced the macro-F1 loss under shuffled metadata from 0.0567 to 0.0203 relative to ordinary residual fusion, although its clean-data macro-F1 was lower. Without bone type at inference, auxiliary anatomy supervision improved macro-F1 from 0.5620 +/- 0.0330 to 0.5899 +/- 0.0289. Conclusions: Structured context improves fracture classification, and consistency-aware gating limits harm from mismatched metadata. The observed clean-performance-robustness trade-off and the absence of patient-level identifiers motivate external and prospective validation.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.21482v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.