arXiv:2611.14895v1 cs.CV

HeadIO: 머리 착용형 기기의 신경망 관성 오도메트리를 위한 바디 프레임 헤딩 분해

HeadIO: Body-Frame Heading Decomposition for Neural Inertial Odometry on Head-Mounted Devices

Taeyoung Yeon, Yiquan Li, Chenfeng Gao, Vasco Xu, Karan Ahuja

제출 2026-11-13

한국어 초록

관성 측정 장치(IMU)만을 사용하는 관성 오도메트리(IO)는 VR 헤드셋, AR 글라스, 이어버드와 같은 머리 착용형 기기에서 카메라 없는 머리 추적을 가능하게 한다. 기존 IO 방법은 중력 정렬 월드 프레임에서 동작하며, 이는 요(yaw) 등변성을 갖지 않는다. 요 증강은 강건성을 개선하지만 등변성을 보장하지는 않으며, 학습된 등변 레이어는 이를 달성하지만 EqNIO의 전체 파이프라인은 본 방법 대비 FLOPs가 거의 3$\times$에 달한다. 원시 바디 프레임 IMU 입력은 본질적으로 요 불변이지만, 머리 기울임이 중력 신호와 운동 신호를 기기 축들에 걸쳐 재분배하므로 그 표현은 기울임에 대해 가변적이다. 본 논문은 바디 프레임 헤딩 분해와 양방향 Mamba 백본을 결합한 머리 착용형 관성 오도메트리 방법인 HeadIO를 제안한다. 제안하는 분해는 기기 방향의 기울임 성분만을 사용하여 중력 정렬 성분과 수평 성분을 분리함으로써 기울임 불변성을 달성한다. 네 가지 머리 착용형 데이터셋에서 평가한 결과, HeadIO는 가장 큰 벤치마크 데이터셋인 Nymeria에서 학습된 등변 레이어를 사용하는 월드 프레임 방법 대비 RTE-5s를 8.1%(0.260 m $\to$ 0.239 m) 개선하며, FLOPs는 거의 3$\times$ 낮고 파라미터는 8$\times$ 적다. HeadIO는 제안한 분해 방법에 바디 프레임 의미론을 기본적으로 제공하는 모든 Aria 글라스 데이터셋에서 주요 지표인 RTE-5s에 대해 최고 성능을 달성한다. 또한 Nymeria에서 IMU만 사용하는 배포 시나리오를 평가하였으며, 여기서도 HeadIO는 최고 성능을 유지한다. 본 방법은 주로 중력 신호로부터 얻을 수 있는 기울임 정확도에 의존함을 보인다. 요의 경우, 단일 계수 자이로스코프 보정으로 요 오차의 11.6%를 제거하고 RTE-5s를 2.5% 개선하며, 희소한 외부 요 보정(예: 30초마다 한 번)은 RTE-5s를 12.0% 개선할 수 있다. 제안하는 분해는 경량이며 어떤 백본과도 결합 가능하고, 머리 착용형 기기에서의 실시간 배포에 적합하다.

원문 초록

Inertial odometry (IO) using only Inertial Measurement Units (IMUs) enables camera-free head tracking in head-mounted devices such as VR headsets, AR glasses, and earbuds. Prior IO methods operate in a gravity-aligned world frame, which is not yaw-equivariant. Yaw augmentation improves robustness but does not guarantee equivariance; learned equivariant layers achieve it, but EqNIO's full pipeline costs nearly 3$\times$ the FLOPs of ours. While raw body-frame IMU inputs are inherently yaw-invariant, head tilt redistributes both gravity and motion signals across device axes, making the representation tilt-variant. We propose HeadIO, which combines a body-frame heading decomposition with a bidirectional Mamba backbone for head-mounted inertial odometry. Our decomposition achieves tilt invariance by separating gravity-aligned and horizontal components using only the tilt component of device orientation. We evaluate on four head-mounted datasets and find that HeadIO improves RTE-5s by 8.1% (0.260 m $\to$ 0.239 m) over world-frame methods with learned equivariant layers on Nymeria, the largest benchmark dataset, at nearly 3$\times$ lower FLOPs and 8$\times$ fewer parameters. HeadIO achieves state-of-the-art performance on our primary metric, RTE-5s, on all Aria-glasses datasets, which natively provide body-frame semantics for our decomposition method. We further evaluate the IMU-only deployment scenario on Nymeria, where HeadIO remains state-of-the-art. We show that our method relies mainly on tilt accuracy, which can be obtained from the gravity signal; for yaw, a single-coefficient gyroscope correction removes 11.6% of the yaw error and improves RTE-5s by 2.5%, and sparse external yaw corrections (for example, one every 30 s) can improve RTE-5s by 12.0%. Our decomposition is lightweight, composes with any backbone, and is suitable for real-time deployment on head-mounted devices.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.14895v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.