arXiv:2611.20792v1 cs.CV

TRR: 로봇 시뮬레이션과 RGBT 데이터 생성을 위한 열 상호작용 엔진

TRR: A Thermal Interaction Engine for Robot Simulation and RGBT Data Generation

Biwen Yang, Zhe Cao, Jin Zhang, Haoyang Sun, Zonglu Hu, Jintao Zhao, Zhehao Zhang, Kaizheng Chen, Chengyi Liu, Chengyu Wei, Siyuan Wu, Ruiheng Zhang

제출 2026-11-17

한국어 초록

로봇의 행동은 다음 상호작용의 열 조건을 바꾼다. 접촉을 끝낸 뒤 남은 열, 물체를 옮길 때 함께 이동한 열, 표면 아래에 축적된 열은 현재 온도가 비슷해도 후속 접촉의 결과를 바꿀 수 있다. 학습 궤적은 이런 효과가 이전 행동을 이후 관측과 과제 결과에 어떻게 연결하는지 담아야 한다. 본 연구는 Thermal Robot Renderer(TRR)를 소개한다. 접촉하는 양쪽 물체에 위치와 깊이별 열 상태를 부여하고, 접촉·이동·분리 과정에서 국소 열 교환을 갱신한다. 하나의 실행 시계를 사용해 동기화된 RGB·열화상(RGBT) 관측과 사건별 과제 검사를 생성한다. 통제된 개입으로 잔열, 공간적 열 이동, 내부 열 저장이 후속 접촉 결과에 중요한 이유를 보였다. 같은 상태에서 정적·동적 실행을 짝지은 여섯 과제 벤치마크를 생성했다. 2,224쌍, 총 4,448개 궤적이며 두 시점에서 동기화한 관측과 상태 및 행동을 포함한다. 전용 학습 말뭉치에서 열 이력을 관측할 수 있으면 안전한 접촉 위치를 고르는 비율이 75.0%에서 91.7%로 올랐다. 동적 이력으로 학습하면 피드백 실행 방식을 동일하게 유지한 새 가열 절차에서, 시뮬레이션의 전이 과제 완료율이 50%포인트 높아졌다. MuJoCo와 Isaac Sim의 RGBT 관측 어댑터를 시연했다. 준비한 로봇 구성 10개와 시연한 카메라 시점 6개의 목록을 제시하고, 기존 로봇 장면에서 RGBT 기록을 내보내기까지의 개발자 워크플로를 설명한다. 벤치마크, 워크플로, 6절의 플랫폼 자료는 예정된 공개 배포의 첫 항목이다. 시연과 자료 갱신 내용은 프로젝트 페이지에서 확인할 수 있다.

원문 초록

A robot's actions change the thermal conditions of its next interaction: heat retained after release, carried with objects or stored beneath the surface can change a later contact's outcome despite similar current temperatures. Training trajectories must capture how these effects connect earlier actions to later observations and task outcomes. We present TRR, a \emph{Thermal Robot Renderer} that attaches spatial and depth-resolved thermal state to both contact partners, updates local heat exchange through contact, transport and separation, and generates synchronized RGB--thermal (RGBT) observations and event-local task checks on one execution clock. Controlled interventions show why retained heat, spatial transport and internal storage matter for subsequent contact outcomes. From the same state, TRR produces a paired six-task benchmark of 2,224 static--dynamic pairs, that is, 4,448 trajectories with synchronized dual-view observations, states and actions. Visible thermal history raises safe contact-site selection from 75.0\% to 91.7\% on a dedicated learning corpus, and training on dynamic histories raises simulated transfer completion by 50 percentage points under a new heating procedure with shared feedback execution. We demonstrate RGBT observation adapters on MuJoCo and Isaac Sim, report an engineering inventory of ten prepared robot configurations and six demonstrated camera viewpoints, and describe a developer workflow that carries an existing robot scene to exported RGBT records. The benchmark, the workflow and the platform resources described in Section 6 form the first items of a planned public release. Demonstrations and resource updates are available on the project page.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.20792v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.