PolarScale: 방사 측정학적으로 일관된 RGB-스톡스 추정을 위한 물리 기반 벤치마크
PolarScale: A Physics-Grounded Benchmark for Radiometrically Consistent RGB-to-Stokes Estimation
한국어 초록
편광 이미징은 강도 이미징을 넘어서는 물리적 단서를 제공하지만, 일반적으로 특수 하드웨어가 필요합니다. 최근 방식들은 RGB 형태의 입력으로부터 편광을 추론하지만, 정규화된 스톡스(Stokes) 성분이나 상대적 기술자만을 예측하므로 완전한 스톡스 재구성에 필요한 방사 측정 스케일(radiometric scale)이 제거되어 있습니다. 본 논문에서는 이 스케일을 명시적인 예측 및 평가 대상으로 삼는 벤치마크인 PolarScale을 소개합니다. 기존 3색 풀 스톡스 측정값을 기반으로 구축된 PolarScale은 장면별 정규화된 총 강도 이미지 $s_0$(소비자용 sRGB 사진이 아닌 장면 참조 선형 이미지)를 입력으로 받아 정규화된 스톡스 성분, AoLP/DoLP/DoCP, 그리고 장면별 스케일을 예측하도록 모델에 요구합니다. 스케일이 입력에서 나누어져 제거되었기 때문에 물리적으로 식별할 수 없습니다. 따라서 PolarScale은 각도, 자기 일관성, 물리적 경계 지표와 함께 상수 스케일 대조군과 비교하여 데이터셋 조건부 의미론적 스케일 추정을 평가합니다. 7개의 복원 기반 및 생성형 백본과 3가지 예측 전략에 걸쳐, 가장 성능이 뛰어난 복원 모델은 상수 대조군의 5.7% 대비 3.6-4.3%의 평균 상대 오차로 스케일을 추정하고 0.25% 미만의 픽셀에서만 물리적 경계를 위반한 반면, 2개의 생성형 베이스라인은 0에 가까운 스케일로 축퇴되었습니다. 또한 명시적인 기술자 감독은 기술자 정확도를 향상시켰습니다(MAE의 경우 23.66 vs. 18.88 dB PSNR). 예측된 풀 스톡스 표현은 확산/거울 반사 분리, 재질 분할, 눈부심 분류를 개선하지만, 확산/거울 반사 분리에서는 학습된 스케일이 상수 대조군과 비슷한 수준의 성능만을 보였습니다.
원문 초록
Polarization imaging provides physical cues beyond intensity imaging but typically requires specialized hardware. Recent methods infer polarization from RGB-like inputs, yet predict only normalized Stokes components or relative descriptors, from which the radiometric scale needed for full Stokes reconstruction has been divided out. We introduce PolarScale, a benchmark that makes this scale an explicit prediction and evaluation target. Built on existing trichromatic full-Stokes measurements, PolarScale takes the per-scene normalized total-intensity image $s_0$ (a scene-referred linear image, not a consumer sRGB photograph) and asks models to predict normalized Stokes components, AoLP/DoLP/DoCP, and a per-scene scale. Because the scale is divided out of the input, it is not physically identifiable; PolarScale therefore evaluates dataset-conditioned semantic scale estimation against a constant-scale control, together with angular, self-consistency, and physical-bound metrics. Across seven restoration-based and generative backbones and three prediction strategies, the strongest restoration models estimate the scale with 3.6-4.3% mean relative error versus 5.7% for the constant control and violate physical bounds on fewer than 0.25% of pixels, whereas two generative baselines collapse to a near-zero scale; explicit descriptor supervision improves descriptor accuracy (23.66 vs. 18.88 dB PSNR for MAE). Predicted full-Stokes representations improve diffuse/specular separation, material segmentation, and glare classification, although in diffuse/specular separation the learned scale performs only on par with the constant control.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
22 pages, 17 figures, 8 tables. Accepted to NeurIPS 2026