최신 지각 기반 다리 로봇 강화학습 컨트롤러는 일반적으로 (i) 동작 공간을 제한하고, 정책 최적화에 바이어스를 유발하며, 로봇 형태 간 적응성을 제한하는 오실레이터 또는 IK(역기구학) 기반 보행 사전분포를 부과하거나, (ii) "맹목적(blind)"으로 동작하여 뒷다리 지형을 예측하지 못하고 관측 노이즈에 취약하다. 우리는 보상 shaping을 통해 보행 구조를 강제하는 지각 인식 딥 강화학습 접근법인 Phase-Guided Terrain Traversal(PGTT)을 제안한다. 이는 오실레이터 또는 IK 조건화 동작 사전분포에 비해 귀납적 바이어스(inductive bias)를 줄인다. PGTT는 각 다리의 위상(phase)을 3차 Hermite 스플라인으로 인코딩하고, 스윙(swing) 높이를 국소 heightmap 통계에 맞게 조정하며, 스윙 위상 접촉(contact) 페널티를 추가한다. 한편 정책은 형태 무관(morphology-agnostic) 배포를 위해 관절(joint) 공간에서 직접 동작한다. MuJoCo(MJX)에서 절차적으로 생성된 계단형 지형 위에서 커리큘럼 학습(curriculum learning)과 도메인 랜덤화(domain randomization)로 학습된 PGTT는, 밀침(push) 교란 하에서 평가된 기준선 중 최고 성공률(차선 기준선 대비 중앙값 +7.5%)과 이산 장애물(+9%)에서 달성하며, 유사한 속도 추적(velocity tracking)을 유지한다. 우리는 실시간 LiDAR 고도-heightmap 파이프라인을 사용하여 Unitree Go2에서 PGTT를 검증하고, 동일한 하이퍼파라미터로 ANYmal-C에 대한 예비 결과를 보고한다. 이 결과는 지형 적응형·위상 기반 보상 shaping이 플랫폼별 정책 사전분포나 광범위한 재튜닝 없이 플랫폼 간 전이(transfer)될 수 있다는 초기 증거를 제공한다.
Recent advances in control have enabled bipedal-wheeled robots to traverse slopes and single-step obstacles, yet long staircase traversal remains challenging as current teacher-student frameworks suffer from weakened dynamics-aware representations and incomplete terrain geometry encoding. To bridge this gap, we propose DynaWM, a dynamics-aware representation learning framework. To enhance terrain encoding capability and enable transparent assessment, we introduce a world model as a regularizer to enforce forward-dynamics awareness, preserving comprehensive terrain geometry while facilitating hierarchical encoding visualization. To stabilize knowledge transfer, we employ a momentum target encoder to provide consistent distillation targets, preventing dimensional collapse from non-stationary teacher updates. Evaluation of the learned representations through Principal Component Analysis (PCA) visualization and quantitative metrics reveals that our encoder hierarchically captures terrain geometry with higher terrain encoding capability, leading to enhanced terrain adaptability and motion smoothness. Experimental results in simulation and real hardware demonstrate that our method achieves superior terrain adaptability and motion smoothness, enabling bipedal-wheeled robots to overcome diverse continuous stairs, as shown in Fig. 1.