CrossEnv: 장기 에이전트 학습을 위한 검증 가능한 환경 간 과제 합성
CrossEnv: Synthesizing Verifiable Cross-Environment Tasks for Long-Horizon Agent Training
한국어 초록
실행할 수 있는 합성 환경은 긴 작업을 수행하는 에이전트에 대규모 학습 과제와 검증 가능한 피드백을 제공한다. 기존 환경 합성 방법은 주로 개별 환경 안에서 과제를 생성한다. 그러나 실제로는 한 서비스에서 얻은 정보에 따라 다른 서비스에서 행동하는 등 서비스 간 상호작용이 일어난다. 개별 환경 과제는 이를 충분히 반영하지 못한다. 환경 간에 합성한 데이터가 서로 일관돼야 상호작용을 실제로 실행하고 검증할 수 있어 이런 과제를 만들기 어렵다. 엔터티–도구 그래프로 환경 간 연결을 식별하고 과제별 데이터를 일치시켜 실행 및 검증할 수 있는 환경 간 과제를 합성하는 CrossEnv를 소개한다. CrossEnv-Curriculum은 단일 환경에서 도구를 사용하는 단계에서 시작해 더 많은 환경과 업무 도메인을 조율하는 단계로 나아가고, 이후 사용자와의 상호작용을 도입한다. 외부 벤치마크 네 개에서 환경 간 학습 데이터와 이 커리큘럼을 결합하면 더 적은 학습 예시로 경쟁력 있는 성능을 냈다. 추가 분석은 환경 간 데이터와 커리큘럼 학습의 이점을 뒷받침했다. 새로운 환경 조합, 학습 데이터와 덜 유사한 외부 과제, 더 긴 워크플로로 전이할 수 있다는 근거도 얻었다.
원문 초록
Executable synthetic environments provide scalable training tasks and verifiable feedback for long-horizon agents. Existing environment synthesis methods primarily generate tasks within individual environments. However, these tasks do not adequately capture real-world interactions across services, where actions in one service depend on information obtained from another. Synthesizing such tasks is challenging because data generated across environments must remain consistent to support executable and verifiable interactions. To address this challenge, we introduce CrossEnv, a framework that uses an entity-tool graph to identify connections between environments and aligns task-specific data to synthesize executable, verifiable cross-environment tasks. We further propose CrossEnv-Curriculum, which progresses from single-environment tool use to coordination across more environments and business domains, before introducing user interaction. Across four external benchmarks, combining cross-environment training data with this curriculum achieves competitive performance with fewer training examples. Further analyses support the benefits of cross-environment data and curriculum training, and provide evidence of transfer to new environment combinations, external tasks less similar to the training data, and longer workflows.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.22777v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.