VLN-Flash: 비전-언어 내비게이션을 위한 적응형 실행과 병렬 행동 디코딩
VLN-Flash: Parallel Action Decoding with Adaptive Execution for Vision-and-Language Navigation
한국어 초록
비전-언어 내비게이션 정책이 행동 시퀀스를 자기회귀적으로 생성하면, 로봇은 서로 의존하는 예측들이 이어지는 동안 기다려야 한다. 이산 행동 어휘가 작으면 짧은 구간의 모든 계획을 병렬로 채점할 수 있다. 본 연구는 한 번의 순전파로 행동 접두 시퀀스의 전체 트리를 평가하는, 별도 학습이 필요 없는 디코더 VLN-Flash를 제안한다. 분기별 어텐션과 일치시킨 토큰 위치는 정확한 산술 연산을 가정할 때 각 접두 시퀀스에 대해 기존 정책의 조건부 행동 분포를 보존한다. 깊이마다 단계별 탐욕 선택으로 얻은 접두 시퀀스와 가장 강한 대안의 점수 차이를 사용해 실행할 행동 수를 결정한다. 이어 로봇은 선택한 깊이에서 결합 점수가 가장 높은 계획을 실행하고 다음 관측을 수행한다. 입력을 같게 맞춘 조건에서 VLN-Flash의 행동 디코딩은 Uni-NaVid와 StreamVLN의 기본 자기회귀 방식보다 거의 $3\times$ 빨랐다. 기본 자기회귀 디코더와 비교해 R2R-CE 및 RxR-CE에서 성공률과 경로 길이로 가중한 성공률(SPL)을 높였으며, 성공률은 최대 2.7%포인트 개선됐다. 실제 Unitree GO2에서 이동 성공률을 높였으며, 네트워크 전송 시간을 빼고 계산한 행동 사이 평균 대기 시간은 약 160ms 줄었다.
원문 초록
When a vision-and-language navigation policy generates an action sequence autoregressively, the robot waits for a chain of dependent predictions. A small discrete action vocabulary makes it possible to score all short-horizon plans in parallel. We introduce VLN-Flash, a training-free decoder that evaluates the complete action-prefix tree in a single forward pass. Branch-specific attention and matched token positions preserve the original policy's conditional action distribution for each prefix in exact arithmetic. We use the score margin between the stepwise-greedy prefix and its strongest alternative at each depth to decide how many actions to execute. The robot then executes the plan with the highest joint score at the chosen depth before observing again. On matched inputs, VLN-Flash achieves a nearly $3\times$ speedup in action decoding over native autoregression on Uni-NaVid and StreamVLN. Compared with the native autoregressive decoders, it improves success rate and success weighted by path length (SPL) on R2R-CE and RxR-CE, with success gains up to 2.7 percentage points. On a Unitree GO2, VLN-Flash improves navigation success and cuts the mean wait between actions by about 160 ms after subtracting network transmission time.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.19287v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.