arXiv:2611.17658v1 cs.RO

모방 정책은 고유수용성 앵커를 학습한다: 지각 잡음에 대한 예측 법칙과 폐루프 비용

Imitation Policies Learn a Proprioceptive Anchor: A Predictive Law for Perception Noise and Its Closed Loop Cost

Christopher Malili

제출 2026-11-13

저자 비고

arXiv Comments

18 pages, 4 figures

한국어 초록

로봇 조작을 위한 모방 정책은 흔히 잡음이 섞인 물체 위치로 학습되며, 이때 잡음이 섞인 관측값을 할인하도록 학습한다. 본 연구는 정책이 관측값을 얼마나, 그리고 왜 할인하는지를 보인다. 시연자가 물체를 향해 움직이기 때문에 로봇 자신의 상태에는 물체가 어디에 있는지에 대한 정보가 담겨 있다. 학습된 정책은 이 고유수용성 앵커를 관측값과 결합하며, 관측값에 $\alpha = V/(V + s^2)$의 가중치를 부여한다. 여기서 $s^2$은 관측 잡음이고 $V$는 앵커의 오차 분산이다. $V$는 학습자에 귀속되는 값으로, 시연에 대한 선형 모델이 시사하는 값보다 훨씬 작으며, 이 때문에 고전적인 변수 오차(EIV) 회帰가 $\alpha$를 과대추정한다. $V$를 한 번 측정하면 두 개의 robomimic 과제, 두 종류의 학습자, 네 가지 새로운 잡음 수준에 걸친 열 개의 보류된 민감도를 예측했으며, 평균 절대 오차는 0.025로 고전적 EIV의 0.37보다 작았다. 또한 매개변수가 없는 편향 검정은 정책이 단지 잡음을 과대추정한다는 더 단순한 설명을 배제한다. 이러한 할인은 정책이 자신의 상태를 스스로 생성하는 실제 배포 환경으로는 이어지지 않는다. 지속적인 관측 오프셋에 대한 폐루프 민감도는 사전 등록된 기준을 통과한 15개 정책 모두에서 $\alpha$를 초과하였으나, 모든 정책이 오프셋을 완전히 따른다는 더 엄격한 사전 등록 예측은 그중 8개에서만 성립하였다. 사후 분석에서는 $\alpha$가 낮을수록 성공률이 낮았으며 특히 diffusion에서 가파르게 나타났고, 사전 등록된 전향적 검정은 Can 과제에서 두 개의 새로운 잡음 수준에 대해 diffusion의 이러한 경향을 확인하였다. 측정된 $\alpha$는 롤아웃 이전에 성공률을 0.03 이내(95% 구간 $\pm 0.08$)로 예측했으나, 학습 잡음도 이를 동등하게 잘 예측한다. 실패한 고전적 벤치마크를 포함하여 모든 검정은 데이터 확보 이전에 등록되었으며, 그 외 모든 분석은 사후 분석으로 표기하였다. 모든 결과는 합성 가우시안 잡음을 사용한 시뮬레이션에서 얻은 것이다.

원문 초록

Imitation policies for robot manipulation are often trained on noisy object positions, and they learn to discount the noisy reading. We show how much they discount it, and why. Because demonstrators steer toward the object, the robot's own state carries information about where the object is. A trained policy combines this proprioceptive anchor with the reading and weights the reading by $\alpha = V/(V + s^2)$, where $s^2$ is the reading noise and $V$ the anchor's error variance. $V$ belongs to the learner and is far smaller than a linear model of the demonstrations implies, which is why classical errors-in-variables (EIV) regression overestimates $\alpha$. Measured once, $V$ predicted ten held-out sensitivities across two robomimic tasks, two learners and four new noise levels, with mean absolute error 0.025 against 0.37 for classical EIV, and a parameter-free bias test rules out the simpler explanation that the policies just overestimate the noise. The discount does not carry over to deployment, where the policy produces its own state: closed-loop sensitivity to a persistent reading offset exceeded $\alpha$ in all 15 policies that passed the registered gates, although the stricter registered prediction, that all would follow the offset fully, held for 8 of them. Post hoc, lower $\alpha$ went with lower success, steeply for diffusion, and a registered prospective test confirmed this for diffusion on Can at two new noise levels: the measured $\alpha$ predicted success before any rollout, within 0.03 (95% intervals $\pm 0.08$), although training noise predicts it equally well. Every test was registered before its data, including the classical benchmark that failed, and all other analyses are labelled post hoc; all results are in simulation with synthetic Gaussian noise.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.17658v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.