arXiv:2609.22258v1 cs.LG

RS-Claw-Evolution: 장기 작업에서의 경량 원격 탐사 에이전트를 위한 환경 피드백 기반 진화

RS-Claw-Evolution: Environment-Feedback-Driven Evolution for Lightweight Remote Sensing Agents in Long-Horizon Tasks

Kai Ouyang, Dongyang Hou, Liangtian Liu, Zeyuan Wang, Ziyu Li, Chengfu Liu, Zichao Tang, Xuezhi Cui, Shengwu Ouyang, Wentao Yang, Hanwen Yu, Haifeng Li

제출 2026-09-22

한국어 초록

대규모 언어 모델(LLM) 기반의 원격 탐사(Remote Sensing, RS) 에이전트는 지리공간 분석을 자동화하는 유망한 접근 방식을 제공합니다. 그러나 소형 언어 모델 기반의 경량 RS 에이전트는 장기 상태(state) 손실, 비효율적인 환경 피드백 활용, 희소한 최적화 신호로 인해 다단계 상호작용 작업에서 어려움을 겪습니다. 본 논문에서는 3단계를 거쳐 경량 에이전트를 점진적으로 향상시키는 환경 피드백 기반 프레임워크인 RS-Claw-Evolution을 제안합니다. 상호작용 진화(Interaction evolution)는 실행 가능한 코드를 활용해 관측을 제어하고 중간 상태를 유지하며 문맥 중복을 줄입니다. 경험 진화(Experience evolution)는 오류 인식 궤적 생성과 오류 턴 마스킹을 결합하여, 잘못된 동작을 모방하지 않고 유익한 실패 복구 경험으로부터 학습합니다. 의사결정 진화(Decision evolution)는 다차원 환경 보상과 턴 단위 어드밴티지 보호를 결합한 강화학습(RL)을 활용하여 도구 사용 행동을 최적화하고 긴 시퀀스에서의 신용 할당(credit assignment)을 개선합니다. Earth-Bench에서 최적화된 Qwen3-4B 기반 에이전트는 자율 계획(Autonomous Planning) 모드에서 65.9%의 정확도를 달성하여, 미학습 Qwen3-32B 기준선(43.8%) 및 DeepSeek-V3.1(60.8%)을 능가하고 GPT-5(71.6%)에 근접하는 성능을 보였습니다. 이러한 결과는 환경 피드백으로부터 학습함으로써 경량 에이전트를 개선하고 장기 RS 작업에서 더 큰 모델과의 성능 격차를 좁힐 수 있음을 보여줍니다.

원문 초록

Large language model-driven remote sensing (RS) agents offer a promising approach to automating geospatial analysis. However, lightweight RS agents based on compact language models struggle with multi-step interactive tasks due to loss of long-horizon states, inefficient environmental feedback utilization, and sparse optimization signals. We propose RS-Claw-Evolution, an environment-feedback-driven framework that progressively improves lightweight agents through three stages. Interaction evolution uses executable code to control observations, maintain intermediate states, and reduce context redundancy. Experience evolution combines failure-aware trajectory generation with error-turn masking to learn from informative failure-recovery experiences without imitating faulty actions. Decision evolution uses reinforcement learning with multi-dimensional environment rewards and turn-level advantage protection to optimize tool-use behaviors and improve credit assignment in long sequences. On Earth-Bench, the optimized Qwen3-4B-based agent achieves 65.9% accuracy in Autonomous Planning mode, outperforming the untrained Qwen3-32B baseline (43.8%) and DeepSeek-V3.1 (60.8%), while approaching GPT-5 (71.6%). These results demonstrate that learning from environmental feedback can improve lightweight agents and narrow their performance gap with larger models in long-horizon RS tasks.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2609.22258v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.