Multi-modal Rail Crossing Safety Analysis
철도 건널목 이미지와 FRA Form 57 사고 기록을 결합한 멀티모달 파이프라인을 제안하여, 비전-언어 모델(VLM)이 건널목의 위험도를 평가할 수 있는지 탐구한다. 파인튜닝된 경량 VLM 파이프라인으로 고위험/저위험 건널목 분류에서 매크로 F1 0.757, FRA 기반 안전 점수 예측에서 RMSE 0.078을 달성하였다.
철도 건널목 이미지와 FRA Form 57 사고 기록을 결합한 멀티모달 파이프라인을 제안하여, 비전-언어 모델(VLM)이 건널목의 위험도를 평가할 수 있는지 탐구한다. 파인튜닝된 경량 VLM 파이프라인으로 고위험/저위험 건널목 분류에서 매크로 F1 0.757, FRA 기반 안전 점수 예측에서 RMSE 0.078을 달성하였다.