arXiv:2610.01477v1 cs.RO

ALFRED: 장기 식물 모니터링을 위한 요구사항 기반 오픈소스 모바일 매니퓰레이터 개발

ALFRED: Requirement-driven development of an open-source mobile manipulator for long-term plant monitoring

Ciarán Miceal Johnson, Christopher Quail, Garry Ellard, Alistair McConnell, Steve Tonneau, Fernando Auat Cheein

제출 2026-10-01

저자 비고

arXiv Comments

36 pages, 19 figures

한국어 초록

작물과 산림의 계절적 변화를 추적하려면 동일한 식물을 반복적으로 관찰해야 합니다. 지상 로봇은 근거리에서 이를 수행할 수 있으며, 매니퓰레이터(manipulator)는 센서에 더 다양한 시점을 제공합니다. 그러나 장기 필드 데이터셋 뒤에 있는 로봇들은 설계 파일과 함께 공개되는 경우가 드물며, 로봇 자체의 구조가 로봇 팔의 도달 범위를 어떻게 제한하고 센서를 가리는지(occlusion) 빌드 간에 비교되는 일도 거의 없습니다. 본 논문에서는 상용 부품으로 제작된 오픈소스 모바일 매니퓰레이터인 ALFRED를 소개합니다. ALFRED는 재구성 가능한 알루미늄 스트럿 프레임 위에 조향 가능한 애커만(Ackermann) 기반 플랫폼과 6자유도 로봇 팔, LiDAR, RGB-D 카메라, RTK GNSS, IMU를 탑재하고 있으며, 컨테이너화된 ROS 소프트웨어를 구동합니다. 이 로봇은 반복적인 야외 배치를 위한 6가지 요구사항인 내구성, 모듈성, 수리 용이성, 센싱 도달 범위, 지속 시간, 재현성을 기준으로 4단계의 빌드를 거쳐 개발되었습니다. 마지막 3개 빌드에 대한 모델 기반 분석 결과, 로봇 팔의 도달 가능한 포즈 중 사용 가능한 비율이 34.0%에서 60.0%, 그리고 66.1%로 증가한 것으로 나타났으며, 레이 캐스팅(ray casting) 분석을 통해 최종 빌드만이 프레임 장착형 LiDAR의 수평 시야를 전방과 후방 모두에서 방해 없이 유지함을 보였습니다. ALFRED는 배터리 성능 저하, 다른 연구자의 연구를 위한 재구성, 자율 작물 열 주행을 위한 ALFRED 2.0의 병행 개발(빌드 간 전환에 매번 약 6시간 소요)에도 불구하고, 예정된 수집을 누락하지 않고 1년간의 월별 산림 조사(528회 주행)를 성공적으로 완료했습니다. 또한 이번 배치를 통해 기계적 모듈성은 이를 추적하는 로봇 기술(robot description)만큼만 신뢰할 수 있음을 보여주었습니다.

원문 초록

Tracking seasonal change in crops and forests requires observing the same plants repeatedly. Ground robots can do this at close range, and a manipulator gives their sensors more viewpoints. Yet the robots behind long-term field datasets are rarely released with their design files, and how a robot's own structure limits arm reach and occludes its sensors is seldom compared between builds. We present ALFRED, an open-source mobile manipulator built from commercially available components. It carries a six-degree-of-freedom arm, LiDAR, RGB-D cameras, RTK GNSS and an IMU on an Ackermann-steered base, all mounted on a reconfigurable aluminium strut frame, and runs containerised ROS software. It was developed through four builds against six requirements for repeated outdoor deployment: durability, modularity, repairability, sensing reach, endurance and reproducibility. Model-based analysis of the last three builds shows the usable share of the arm's reachable poses rising from 34.0% to 60.0% and then 66.1%, and ray casting shows that only the final build keeps the frame-mounted LiDAR's horizontal view clear both forwards and backwards. ALFRED completed a year of monthly forest surveys (528 traversals) without missing a scheduled collection. This was despite battery degradation, reconfiguration for another researcher's study, and the parallel development of ALFRED 2.0 for autonomous crop-row operation, with each switch between builds taking about six hours. The deployment also showed that mechanical modularity is only as dependable as the robot description that tracks it.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.01477v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2609.23997v2cs.RO공통 태그 mobile manipulation

RoboTalk: 다중 모달 시연으로부터 다중 로봇 통신 및 조율 학습하기

RoboTalk: Learning Multi-Robot Communication and Coordination from Multimodal Demonstrations

다중 로봇 협업은 복잡한 로봇 작업에 대해 더욱 효율적이고 확장 가능한 해결책을 가능하게 할 수 있지만, 부분 관측 가능성(partial observability) 하에서의 협업은 여전히 도전 과제로 남아 있습니다. 자연어 통신은 부분 관측 가능성 하에서 로봇들을 조율하기 위한 유망한 접근 방식을 제공합니다. 그러나 탈중앙화된 조작(decentralized manipulation)에서, 온디바이스 배포를 목표로 하는 소형 비전-언어 모델(VLM)이 다중 모달(multimodal) 시연으로부터 명시적인 로봇 간 통신과 스킬 수준의 행동 선택을 공동으로 학습하는 것은 아직 충분히 연구되지 않았습니다. 이러한 공백을 해결하기 위해, 소형 VLM이 통신하고 조율하도록 학습(training)시키기 위한 53개의 모바일 조작 주방 작업에 걸친 7,950개의 다중 모달 궤적으로 구성된 합성 데이터 생성 파이프라인 및 데이터셋인 RoboTalk을 소개합니다. 이 데이터셋에는 리더-팔로워 계획 프로토콜, 도구 호출(인식, 조작, 내비게이션, 통신), 추론 과정(rationale traces), 그리고 다양화된 자연어 통신이 포함되어 있습니다. 오픈소스 모델을 본 데이터셋으로 미세조정(fine-tuning)하면 새로운 미공개(held-out) 작업에서 77%의 성공률에 도달할 수 있으며, 이는 약 ~2%의 성공률을 보였던 미세조정되지 않은 기존 오픈소스 모델 대비 대폭 향상된 결과입니다.

arXiv:2607.19479v2cs.RO공통 태그 mobile manipulation

ModPack: 양팔 모바일 조작을 위한 확장 가능한 원격 조작 인터페이스

ModPack: Extensible Teleoperation Interface for Bimanual Mobile Manipulation

기존의 원격 조작(teleoperation) 시스템은 특정 로봇 하드웨어 및 작업 도메인에 맞춰 제작되는 경우가 많아 확장성과 적응성이 제한됩니다. 본 논문에서는 통일된 프레임워크 내에서 다양한 로봇 임바디먼트(embodiment)와 작업 요구사항을 지원하도록 설계된 모듈식 및 확장형 원격 조작 시스템인 ModPack을 제시합니다. ModPack의 핵심은 온보드 연산, 전원, 통신 및 데이터 저장을 통합한 독립형 웨어러블 "백팩(backpack)"입니다. 이러한 공유 인터페이스를 기반으로 구축된 이 시스템은 햅틱 피드백을 포함한 관절 수준 원격 조작, 모바일 조작(mobile manipulation), 능동적 지각(active perception)을 포함한 플러그 앤 플레이 방식의 기능 모듈들을 지원합니다. 서로 다른 두 로봇 플랫폼과 실제 환경의 모바일 조작 작업에 대한 실험을 통해, ModPack이 데이터 수집 및 정책 학습(policy learning)을 위한 유연하고 재사용 가능한 프레임워크를 제공하며 로봇 프리(robot-free) 대안보다 더 높은 품질의 데이터를 수집함을 입증합니다. 향후 연구를 지원하기 위해 전체 하드웨어 설계와 소프트웨어 스택을 오픈소스로 공개합니다. 프로젝트 웹사이트: https://modpack-robotics.github.io/

arXiv:2604.00055v2cs.RO공통 태그 mobile manipulation

장기적 로봇 작업을 위한 일반화 가능한 밀집 보상

Generalizable Dense Reward for Long-Horizon Robotic Tasks

기존의 로봇 파운데이션 정책은 주로 대규모 모방 학습을 통해 학습(training)됩니다. 이러한 모델들은 강력한 성능을 보여주지만, 분포 변화(distribution shift)와 오차 누적으로 인해 장기적(long-horizon) 작업에서 종종 어려움을 겪습니다. 강화학습(RL)으로 이러한 모델들을 파인튜닝할 수 있지만, 수작업 보상 엔지니어링 없이는 다양한 작업 전반에서 잘 작동하기 어렵습니다. 본 논문에서는 (1) 작업 진행 상황 인식을 위해 대규모 언어 모델(LLM)과 비전-언어 모델(VLM)을 활용한 외재적 보상(extrinsic reward), 그리고 (2) 정책의 자체 확신도(self-certainty)에 기반한 내재적 보상(intrinsic reward)을 결합한 밀집 보상(dense reward) 프레임워크인 VLLR을 제안합니다. VLLR은 LLM을 사용해 작업을 검증 가능한 하위 작업으로 분해한 다음, VLM을 통해 진행률을 추정하여 짧은 웜업(warm-up) 단계 동안 가치 함수를 초기화(initialization)함으로써 전체 학습 과정에서 발생하는 과도한 추론(inference) 비용을 방지합니다. 또한 자체 확신도는 PPO 파인튜닝 전반에 걸쳐 매 스텝마다 내재적 가이던스를 제공합니다. 절제 연구(ablation study)를 통해 상호 보완적인 이점이 밝혀졌습니다. VLM 기반 가치 초기화는 주로 작업 완료 효율성을 개선하는 반면, 자체 확신도는 특히 분포 외(out-of-distribution) 작업에서 성공률을 크게 향상시킵니다. 모바일 조작 및 내비게이션을 다루는 CHORES 벤치마크에서 VLLR은 수작업 보상 엔지니어링 없이도 사전학습된 정책 대비 최대 56%의 절대적 성공률 향상을 달성하고, 분포 내 작업에서 최신 강화학습 파인튜닝 방법 대비 최대 5%, 분포 외 작업에서 최대 $10\%$의 향상을 달성합니다. 추가적인 시각화 자료는 https://silongyong.github.io/vllr_project_page/ 에서 확인할 수 있습니다.

arXiv:2610.03476v1cs.RO공통 태그 mobile manipulation

MobiAgent: 장기 모바일 조작을 위한 이중 루프 재귀적 정책 자가 개선

MobiAgent: Dual-Loop Recursive Policy Self-Improvement for Long-Horizon Mobile Manipulation

장기(long-horizon) 모바일 조작은 복합적인 실행 오류와 이동(locomotion) 및 로봇 팔 제어 간의 용량 간섭(capacity interference)으로 인해 상당한 어려움을 야기합니다. 최근의 비전-언어-행동(VLA, Vision-Language-Action) 모델은 단기 태스크에는 뛰어나지만 다단계 목표에 필요한 계층적 추론 능력이 부족합니다. 게다가 기존의 계층적 에이전트는 경직된 하위 태스크 매핑, 유연하지 못한 재계획(replanning), 그리고 지속적인 학습의 부재로 어려움을 겪습니다. 이러한 한계를 해결하기 위해, 우리는 견고한 배포 실행과 재귀적 정책 자가 개선을 연결하는 이중 루프 에이전트 프레임워크인 MobiAgent를 소개합니다. 배포 중에 내부 루프(Inner Loop)는 구성 가능성이 높은 원자적 기술(atomic skills)을 통해 고차원 추론을 저수준 제어와 분리합니다. 이는 축소 지평 계획(receding-horizon planning)과 시각적 반추(visual reflection)를 위해 비전-언어 모델을 활용하며, 기술을 동적으로 구성하여 견고한 오류 복구를 보장합니다. 이러한 기술들은 통일된 VLM 백본을 공유하는 특화된 플로우 매칭(flow-matching) 전문가에 의해 실행되어 용량 간섭을 완화하는 동시에 재사용성을 극대화합니다. 동시에 외부 루프(Outer Loop)는 배포 롤아웃을 자율적으로 분할 및 검증하고, 이를 클러스터링하여 원자적 기술을 발견하며, 인간의 주석 없이 스킬 라이브러리를 지속적으로 미세조정함으로써 자동화된 평생 학습을 주도합니다. RoboCasa, BEHAVIOR-1K, 그리고 실제 환경 태스크에서의 평가는 MobiAgent의 효과를 입증합니다. 본 모델은 BEHAVIOR-1K에서 $\pi_{0.5}$-TA보다 22.5%p 높은 성능을 보이며 실행 실패로부터의 견고한 복구를 가능하게 합니다. 자율적인 데이터 재활용을 통해 RoboCasa에서는 성공률이 7.50%에서 27.50%로 향상되었고, Astribot S1에서는 32.5%에서 57.5%로 향상되었습니다.

arXiv:2610.02089v1cs.RO공통 태그 mobile manipulation

HumanoidToolBench: 선택부터 이동 실행까지 휴머노이드 도구 사용 벤치마킹

HumanoidToolBench: Benchmarking Humanoid Tool Use from Selection to Mobile Execution

로봇 하드웨어와 학습 방법이 발전함에 따라, 휴머노이드가 고유한 물리적 한계를 뛰어넘는 작업을 수행하기 위해서는 도구가 필요합니다. 성공적인 도구 사용을 위해서는 적절한 도구를 선택하고 조작(manipulation)과 필요 시 보행(locomotion)을 조율하여 작업을 완료해야 합니다. 기존 벤치마크는 휴머노이드에서 이러한 능력들을 종합적으로 평가하지 못합니다. 본 논문에서는 3가지 시나리오, 3가지 실행 수준, 2가지 도구 세트 모드를 아우르는 18개 작업 벤치마크인 HumanoidToolBench와 함께, 시뮬레이션 및 실제 Unitree G1 로봇에서 수집된 3,100개의 시연(demonstration) 데이터셋인 ToolBook을 소개합니다. 시뮬레이션에서 7개 정책, 실제 로봇에서 3개 정책을 평가한 결과 적절한 도구를 선택하는 것과 작업을 완수하는 것 사이에 상당한 격차가 있음을 확인했습니다. GR00T N1.7에 대한 심층 분석 결과, 보지 못한(unseen) 도구에 대한 선택 정확도가 감소하고 무관한 지시문이 주어져도 작업을 계속 실행하는 문제가 나타났습니다. 코드와 데이터는 https://snu-pi.github.io/HumanoidToolBench/ 에서 확인할 수 있습니다.

arXiv:2608.02270v2cs.RO공통 태그 agricultural robotics

TS-MAMP: 세컨드라이프 EV 부품과 NMS-Free 온디바이스 잡초 탐지를 갖춘 재제조 농업 로봇

TS-MAMP: A Remanufactured Agricultural Robot with Second-Life EV Components and NMS-Free On-Device Weed Detection

농업 4.0 로봇 시스템은 밭 작업 효율을 높이지만, 전 세계 농업을 지배하는 분산된 소규모 농장에는 여전히 자본 집약적이다. 한편, 은퇴한 저속 전기차(LSEV) 파워트레인은 점점 늘어나고 있으며, 기능적인 전기·기계적 가치를 보유하고 있음에도 파괴적 재활용되고 있다. 본 논문은 3R(reduce, reuse, recycle) 순환경제 원칙에 따라 구축된 재제조 로봇인 TS-MAMP(Telescopic-Sleeve Modular Agricultural Mobile Platform)를 제시한다. 은퇴한 48 V BLDC(brushless-DC) 허브 모터는 역기전력(back-EMF) 매칭으로 페어링되며, 건강 상태(state of health) 60%–80%로 선별된 납산 배터리 모듈은 모듈 간 전압 편차 100 mV 이내에서 능동 균형화된다. 이러한 재사용 부품들은 함께 파워트레인 및 섀시 BOM 비용을 약 60% 절감하여 USD 450 미만으로 낮춘다(지각 및 제초 모듈 제외). 트러스 섀시는 최소 200 kg 정적 하중, 1200 mm에서 2000 mm까지 연속 조절 가능한 궤폭, 5분 이내 모듈 교환을 제공한다. 일관된 이중 할당(dual-assignment) 학습과 negative-sample 학습을 적용한 NMS-free(non-maximum-suppression-free) YOLOv10n 탐지기는 Wanxi Crop-Weed 데이터셋에서 평균 정밀도(mAP)@0.5 80.87%([email omitted]:0.95 58.41%)를 달성하며, Jetson Nano에서 FP16 TensorRT로 배포되어 온디바이스 추론(inference) 가능성을 확인한다. TS-MAMP는 적절한 선별만으로도 은퇴 EV 부품이 재설계되어 저렴한 AI 기반 농업 로봇으로 전환될 수 있음을 보여주며, 상용 자동화가 닿지 못하는 소농 경작지를 위한 재제조 경로를 연다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.