정련 대 재계획: 로봇 정책에서의 추론 연산 배분
Refinement vs. Replanning: Inference Compute Allocation in Robot Policies
한국어 초록
고정된 청크 방식 로봇 정책은 배포 시점의 추론 연산을 서로 결합된 두 가지 방식으로 사용할 수 있다. 하나는 예측된 행동 청크를 정련하기 위해 각 정책 호출 내에서 더 많은 연산을 수행하는 것이고, 다른 하나는 새로운 관측으로부터 재계획하기 위해 정책을 더 자주 호출하는 것이다. 본 연구는 모델 가중치를 갱신하지 않고 이 배분을 연구한다. 우리의 평가 절차는 명목 연산 비율과 전체 시도 비용을 모두 사용하여 성공률을 보고하고, 탐색 과제에서 비교 대상을 선정하며, 보류된 과제에서 사전에 지정된 비교를 검정한다. 보류 결과를 살펴본 뒤 추가된 비교는 관찰된 양상을 요약할 뿐이다. 우리는 이 절차를 동기식 LIBERO 시뮬레이션에서 하나의 고정된 SmolVLA 체크포인트로 시연하며, 노이즈 제거 횟수를 정련 제어 변수로 사용하고 청크 길이를 K=50으로 고정한다. 산술량과 지연 시간은 비용을 서로 다르게 특징짓는다. d=10에서 계산된 산술량의 82.1%는 노이즈 제거와 무관한 반면, 고정 입력 호스트 시간에 대한 기술적 아핀 적합은 17.7%를 절편에 할당한다. h=2에서 d=2는 160회 시도 중 139회 성공하여 d=5의 122/160보다 높으며(+10.6 퍼센트포인트; 과제 조건부 95% 구간: +4.4 ~ +16.9), 제어 단계당 산술량은 5.9% 적다. d=2에서 h=2 대신 h=5를 실행하면 성공은 138/160 대 139/160이고 시도당 산술량은 60.7% 낮으나, 동등성은 확립되지 않는다. 이 사례 연구는 배포 시 적응이 생성 노력과 피드백 빈도를 함께 평가해야 하는 이유를 보여 주며, 보편적인 설정을 정의하지는 않는다.
원문 초록
A frozen chunked robot policy can spend deployment-time inference compute in two coupled ways: more work within each policy call to refine a predicted action chunk, or more frequent policy calls to replan from fresh observations. We study this allocation without updating model weights. Our evaluation procedure reports success with both nominal compute rate and complete attempt cost, selects comparisons on discovery tasks, and tests prespecified comparisons on held-out tasks. Comparisons added after inspecting the held-out results only summarize observed patterns. We demonstrate the procedure with one frozen SmolVLA checkpoint in synchronous LIBERO simulation, using denoising count as the refinement control and fixing chunk length at K=50. Arithmetic and latency characterize cost differently: at d=10, 82.1% of counted arithmetic is independent of denoising, whereas a descriptive affine fit to fixed-input host time assigns 17.7% to its intercept. At h=2, d=2 succeeds on 139/160 attempts versus 122/160 for d=5 (+10.6 percentage points; task-conditional 95% interval: +4.4 to +16.9), while using 5.9% less arithmetic per control step. Executing h=5 rather than h=2 at d=2 yields 138/160 versus 139/160 successes and 60.7% lower arithmetic per attempt; equivalence is not established. The case study shows why deployment adaptation must evaluate generation effort and feedback frequency jointly; it does not define a universal setting.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.19034v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.