Inventa: 자율적 과학 발견을 위한 분산형 자기 개선 에이전트
Inventa: Decentralized Self-Improving Agents for Autonomous Scientific Discovery
한국어 초록
대규모 언어 모델(LLM) 에이전트는 연구 아이디어를 생성하고 반복적 실험을 통해 과학적 발견을 향상시킬 수 있다. 그러나 에이전트 수나 반복 횟수를 늘린다고 해서 더 다양하거나 실현 가능한 아이디어가 자동으로 만들어지는 것은 아니다. 에이전트들은 유사한 후보로 수렴하거나, 공유 메모리 구성 요소를 통해 근거 없는 주장을 전파하거나, 더 이상 개선을 가져오지 못하는 탐색 전략을 반복해서 적용할 수 있다. 우리는 자율 연구 단위와 검증된 공유 지식을 활용하는 자동 과학 발견 프레임워크 Inventa를 소개한다. 각 단위는 변이 에이전트를 사용해 후보 아이디어의 계보를 만든다. 지역 오케스트레이터 에이전트는 주기적으로 변이 에이전트의 하네스를 조정한다. 진전이 정체되면 오케스트레이터 에이전트는 모델을 교체하거나 아이디어 진화 과정을 다시 시작한다. 검증기는 각 후보 아이디어를 평가하고, 검증된 개선, 유용한 구성 요소, 제약 위반을 단위 간 유일한 채널인 공유 지식에 기록한다. 우리는 연구 주기 전반에 걸친 다섯 개의 벤치마크, 즉 검색(ScholarCatalyst), 아이디어 생성(IdeaBench), 제안서 작성(IdeaScientist), 과학 법칙 발견(EurekaBench, SciLaws-Bench)에서 Inventa를 평가한다. Inventa는 다섯 개 모두에서 선두를 차지하며, EurekaBench에서 CORAL의 56.2% 대비 73.6%를 달성한다. IdeaBench에서는 논문당 26.0개의 새로운 아이디어를 발견하여 ResearchAgent의 18.6개보다 많으면서 모델 호출은 82% 적다.
원문 초록
Large language model (LLM) agents can generate research ideas and improve scientific discovery through iterative experimentation. However, increasing the number of agents or iterations does not automatically translate to producing more diverse or feasible ideas. Agents may converge on similar candidates, propagate unsupported claims through shared memory components and repeatedly apply search strategies that no longer yield any improvements. We introduce Inventa, a framework for automated scientific discovery that employs autonomous research units and verified shared knowledge. Each unit creates a lineage of candidate ideas using a mutator agent. A local orchestrator agent periodically adapts the mutator's harness. When progress stalls, the orchestrator agent replaces its model or restarts the idea evolution process. Verifiers evaluate each candidate idea and record verified improvements, useful components and constraint violations in a shared knowledge, the only channel between units. We evaluate Inventa on five benchmarks spanning the research cycle, covering retrieval (ScholarCatalyst), ideation (IdeaBench), proposal writing (IdeaScientist), and scientific law discovery (EurekaBench, SciLaws-Bench). It leads all five, achieving 73.6% on EurekaBench versus 56.2% for CORAL. On IdeaBench, it discovers 26.0 novel ideas per paper, compared with 18.6 for ResearchAgent, with 82% fewer model calls.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.21847v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.