PyTorchKR Papers

최신 논문

총 2편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2506.18266v2cs.CV

YouTube-Occ: YouTube 비디오로부터 실내 3D 시맨틱 점유 예측 학습하기

YouTube-Occ: Learning Indoor 3D Semantic Occupancy Prediction from YouTube Videos

3D 시맨틱 점유 예측(3D semantic occupancy prediction)은 세밀한 장면 이해에 매우 중요하지만, 프라이버시에 민감한 실내 환경에서의 발전은 대규모 주석이 달린 3D 데이터의 부족으로 인해 근본적으로 가로막혀 있습니다. 이러한 한계를 극복하기 위해, 본 연구에서는 광범위한 수작업 주석 과정을 우회하는 동시에 풍부하고 캘리브레이션되지 않은 인터넷 상의 야생(in-the-wild) 비디오로부터 실내 3D 시맨틱 점유 예측을 학습하는 방법을 탐구합니다. 구체적으로, 원시 웹 비디오를 처리하고 카메라 기하 구조를 추정하며 장면 포인트 클라우드를 재구성하고 조밀한 시맨틱 의사 레이블(pseudo-labels)로 이를 강화하기 위해 2D 및 3D 파운데이션 모델을 활용하는 자동화된 데이터 파이프라인을 포함한 YouTube-Occ를 소개합니다. 그러나 이러한 그럴듯한 의사 레이블은 단순한 지도 방식(naive supervision) 하에서는 성능 향상을 이끌어내지 못합니다. 이러한 난관을 해결하기 위해, 본 연구에서는 이중 정렬 전략을 갖춘 특징 증류(feature distillation) 기반의 사전학습(pre-training) 프레임워크를 추가로 제안합니다. 이 프레임워크 내에서 프레임 내 정렬(intra-frame alignment)은 복셀 앵커 가우시안화(voxel-anchored Gaussianization) 모듈을 활용하여 3D 특징을 해당하는 2D 사전 정보(prior)와 정렬하며, 장면 간 정렬(cross-scene alignment)은 클래스 프로토타입 증류를 통해 전역적인 시맨틱 일관성을 달성합니다. 실증적으로 YouTube-Occ는 NYUv2 및 Occ-ScanNet 벤치마크의 세 가지 주요 아키텍처 전반에서, 특히 제한된 데이터 조건 하에서 일관된 성능 향상을 제공합니다. 향후 연구에 영감을 주기를 바라며 코드와 데이터를 공개할 예정입니다.

arXiv:2607.24288v1cs.CV

확장 가능한 양자 향상 의료 이미지 분할을 위한 슈퍼픽셀 기반 QUBO

Superpixel-Based QUBO for Scalable Quantum-Enhanced Medical Image Segmentation

이차 무제약 이진 최적화(QUBO)는 의료 컴퓨팅 문제를 위한 강력한 프레임워크로 부상했다. 이진 결정 변수는 임상적 선택을 자연스럽게 표현하므로, QUBO 공식화는 양자 어닐링(quantum annealing) 하드웨어에 잘 맞다. 그러나 근본적인 확장성(scalability) 과제가 실용적 배포를 제한한다. 문제 크기는 입력 차원에 따라 급격히 증가하여 계산 병목을 만들고, 응용을 단순화된 시나리오로 제한한다. 본 논문은 계층적 문제 축소를 통해 이 과제를 해결하며, 이는 의료 이미지 분할에서 입증된다. 픽셀 수준 QUBO 공식화는 256×256 이미지에 65,000개 이상의 변수를 생성하여, 기존 접근법이 42×42 해상도로 다운샘플링하고 픽셀 정보의 97%를 버리도록 만든다. simple linear iterative clustering(SLIC)을 사용해 픽셀을 지각적으로 의미 있는 영역으로 묶는 슈퍼픽셀 기반 QUBO 프레임워크를 제안하고, min-cut과 smoothness 목적함수를 결합한 영역 인접 그래프(RAG) 위에서 분할을 QUBO로 공식화한다. INbreast 유방촬영 유방암 영상에 대한 검증 결과, 분할 품질이 4.2% 향상되었음(평균 IoU 0.76 대 0.73)을 보였으며, 계산 속도는 33배 향상(0.67초 대 21.97초), 문제 크기는 97.3% 감소(1764에서 48 변수)하였다. 이는 모두 다운샘플링된 버전이 아닌 전체 해상도 영상을 처리하면서 달성되었다. 축소된 문제 크기는 또한 현재 양자 어닐러의 연결성 한계 내에 잘 들어맞아, 역사적으로 양자 하드웨어에서 픽셀 수준 QUBO 분할의 직접 배포를 막아온 임베딩(embedding) 오버헤드를 제거한다.