광학 현미경을 통한 입자 및 섬유 특성 분석을 위한 인공지능
Artificial Intelligence for the Characterization of Particles and Fibers by Optical Microscopy
한국어 초록
입자 및 섬유 분산액의 광학 현미경 검사는 시료의 형태, 화학적 조성, 배율 및 조명 조건의 영향을 받는 미세한 시각적 단서를 해석하는 과정을 수반합니다. 본 연구에서는 의미론적 앵커(semantic anchor)를 사용하여 현미경 이미지로부터 의미론적으로 풍부한 이미지 임베딩을 추출하는 인공지능(AI) 증류(distillation) 프레임워크를 소개합니다. 멀티모달 티처(multimodal teacher)는 각 이미지의 시각적 임베딩을 조명 모달리티, 배율, 시료의 정체성 및 형태를 나타내는 세 가지 텍스트 임베딩과 결합합니다. LongCLIP의 확장된 컨텍스트 텍스트 인코더로 생성된 이 벡터는 2304차원의 블록 구조화된 티처 벡터를 형성하며, 그 구성 블록들은 학습 및 추론 전반에 걸쳐 물리적으로 해석 가능한 상태를 유지합니다. 다층 퍼셉트론(MLP) 디코더를 갖춘 스튜던트 비전 트랜스포머(ViT)는 이미지만으로 이 티처 벡터를 재구성하도록 학습되며, 티처의 블록 구조에 대한 좌표 수준의 충실도를 강제하는 평균 절대 오차(L1) 손실을 최소화합니다. 티처 임베딩 공간의 HDBSCAN 클러스터링에서 파생된 의사 클래스(pseudo-class)에 대한 교차 엔트로피 항은 붕괴 방지 정규화기 역할을 하여, 대조적 네거티브 마이닝 없이도 클러스터 간 분리를 강제합니다. 추론 시 스튜던트는 이미지 입력만으로 작동하여 티처 벡터의 전체 의미론적 내용을 복원하는 컴팩트한 임베딩을 생성합니다. 이 프레임워크는 leave-one-out 최근접 이웃 검색 하에서 세분화된 시료 설명 레이블에 대해 약 80%의 의사 클래스 검증 정확도와 75%의 Recall@1(재현율@1)을 달성합니다. 이러한 결과는 의미론적 앵커링을 통해 비전 전용 스튜던트가 이미지 전용 학습보다 더 풍부하고 해석 가능한 표현을 획득할 수 있음을 보여주며, 이질적인 입자 및 섬유 분산액의 검색, 분류 및 탐색적 분석에 직접 적용할 수 있습니다.
원문 초록
Optical microscopy of particle and fiber dispersions involves interpreting subtle visual cues influenced by specimen morphology, chemical composition, magnification, and illumination conditions. We introduce an artificial intelligence (AI) distillation framework that extracts semantically rich image embeddings from microscopy images using semantic anchors. A multimodal teacher combines each image's visual embedding with three text embeddings representing illumination modality, magnification, and specimen identity and morphology. Generated by LongCLIP's extended-context text encoder, this yields a 2304-dimensional block-structured teacher vector whose component blocks remain physically interpretable throughout training and inference. A student vision transformer (ViT) with a multi-layer perceptron (MLP) decoder is trained to reconstruct this teacher vector from the image alone, minimizing a mean absolute error (L1) loss that enforces coordinate-level fidelity to the teacher's block structure. A cross-entropy term over pseudo-classes derived from HDBSCAN clustering of the teacher embedding space acts as a collapse-prevention regularizer, enforcing inter-cluster separation without requiring contrastive negative mining. At inference, the student operates on image input alone, producing compact embeddings that recover the full semantic content of the teacher vector. The framework achieves approximately 80% pseudo-class validation accuracy and 75% Recall@1 on fine-grained specimen description labels under leave-one-out nearest-neighbor retrieval. These results demonstrate that semantic anchoring enables a vision-only student to acquire richer and more interpretable representations than image-only training, with direct applicability to retrieval, classification, and exploratory analysis of heterogeneous particle and fiber dispersions.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.00361v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.