축적된 과학적 지식은 이전의 발견이 연구자들로 하여금 새로운 연구 질문을 선택하고, 조사를 설계하며, 결과를 해석하는 데 기여할 때 학문적 탐구를 발전시킵니다. 이러한 가치를 대규모로 실현하려면 연구 문제, 과학적 절차, 결론, 그리고 증거를 연결하는 추론에 접근할 수 있어야 합니다. 본 연구에서는 학술 문헌을 공유 가능하고 계산적으로 접근 가능한 추론 자원으로 변환하는 과학적 지식 인프라인 대규모 지식 모델(Large Knowledge Model, LKM)을 소개합니다. LKM은 논문을 출처에 기반한(source-grounded) 추론 그래프로 표현하고, 동일한 객체에 대한 구조적 순회(structural traversal)와 의미론적 검색(semantic retrieval)을 결합하며, 여러 논문에 걸쳐 관련된 질문, 주장 및 추론 연쇄(reasoning chains)를 정렬합니다. 이러한 표현은 세 가지 연결된 뷰로 구성된 과학적 추론 지형(Scientific Reasoning Landscape)을 형성합니다. 즉, 연구 문제와 미해결 연구 방향을 구성하는 질문 지형(Question Landscape), 재사용 가능한 과학적 절차를 제시하는 워크플로 지형(Workflow Landscape), 결론을 그에 대한 지지, 불일치 및 조건과 연결하는 증거 지형(Evidence Landscape)입니다. 이 통합된 기반은 추론을 인식하는 과학적 검색, 증거 기반 질의응답, 비교 증거 분석, 연구 계획 수립을 지원합니다. 연구자와 에이전트(agent)는 과학적 의도를 통해 관련 연구를 검색하고, 검토 가능한 뒷받침 논거를 바탕으로 답변을 종합하며, 기존 워크플로와 아직 해결되지 않은 증거를 참고하여 연구 계획을 개발할 수 있습니다. 본 연구에서는 코퍼스 규모의 시스템을 설명하고, 과학적 검색 및 지식 집약적 질의응답을 평가합니다. 답변 모델을 고정한 상태에서 LKM 검색은 ChemBench, PubMedQA, SciBench에서 각각 9.30%, 4.20%, 14.69%의 정확도 향상을 달성합니다. 지식 접근을 과학적 추론 및 행동과 연결함으로써, LKM은 관련 연구 탐색, 과학적 지식 재사용, 그리고 연구자, 에이전트, 연구 주기 전반에 걸친 누적적 탐구 조율을 위한 공통 기반을 제공합니다.
멀티모달 대규모 언어 모델(MLLM)은 일반적인 과제에서 뛰어난 성능을 보이지만, 단일 구조의 선형 계획 방식의 한계로 인해 엄밀한 과학적 추론은 여전히 어렵다. 이러한 순차적 설계는 시각-의미 불일치, 긴 컨텍스트 환각, 고정된 작업 세분화 하에서의 취약한 실행 문제를 자주 겪는다. 우리는 선형 궤적을 동적이며 상태가 격리된 그래프 진화로 대체하는 자기 진화형 위상적 프레임워크인 TopoAgent를 제안한다. TopoAgent는 먼저 프론트엔드 분해기를 사용해 복잡한 질의를 시각적으로 그라운딩된 원자(atom)로 분해한다. 이 원자들은 의존성에 따라 방향성 비순환 그래프(DAG)로 구성되어 엄격한 컨텍스트 격리를 가능하게 하며, 추론 엔진을 무관한 과거 노이즈로부터 보호한다. 또한 적응형 원자 분열(adaptive atomic fission)을 도입하여, 도구 역량 경계를 초과할 때 런타임에 병목 노드를 더 세분화된 하위 원자(sub-atom)로 동적으로 분할한다. 수학, 물리, 화학 벤치마크에 걸친 광범위한 실험 결과, TopoAgent는 최신 선형 에이전트 프레임워크를 크게 능가하며 자율적 과학적 추론을 위한 견고하고 노이즈에 강하며 자기 수정이 가능한 패러다임을 제공함을 보여준다.
과학적 아이디어는 거의 백지에서 시작하지 않는다. 아이디어는 메커니즘을 물려받고, 알려진 한계를 보완하며, 생물학적 유전체처럼 이전 연구의 조각들을 재조합한다. 현재의 벤치마크는 AI 시스템이 이러한 상속 구조를 따를 수 있는지에 대해 여전히 거의 말해주지 않는다. 우리는 과학적 계보 추론과 계보 기반 아이디어 생성을 위한 벤치마크인 IdeaGene-Bench(IG-Bench)를 제안한다. IG-Bench는 IdeaGene 프레임워크를 중심으로 구성된다. 각 논문 또는 제안서는 최소 단위의 타입이 지정되고 근거가 명시된 Idea Genome 객체들의 집합으로 표현되며, GenomeDiff는 이 객체들을 정렬하여 여섯 가지 운영적 진화 역학 하에 상속, 돌연변이, 손실, 외부 도입, 신규 삽입을 기록한다. 이 벤치마크는 10개 과학 도메인에 걸쳐 1,961개의 황금 계보 추적, 1,085개의 선별된 Idea Genome 객체, 920개의 쌍별 GenomeDiff 레코드를 포함한다. 두 가지 평가를 지원한다. IG-Exam(42개 과제 유형, 1,029개 인스턴스)은 Idea Genome 추상화, 상속 추적, 진화적 추론, 계보 검증에 걸쳐 폐쇄형 계보 추론을 테스트한다. IG-Arena는 계보 조건부 Population-Evolution Score(PES)를 사용하여 생성을 평가하는데, 제안서가 주어진 계보 집단의 일관된 후손으로 삽입될 수 있는지를 묻는다. 즉, 올바른 Idea Genome 객체를 상속하고, 인접 연구와 의미 있게 차별화되며, 미래 연구를 위한 선택적 가치를 제공해야 한다. 14개의 LLM 기반 과학자에 대한 실험은 구성적 병목 현상을 드러낸다. 가장 강력한 시스템도 계보 추론에서 정확도 27.3%에 그쳤으며, 구조화된 계보 문맥은 모든 참가자를 균일하게 도움으로써 시스템 순위를 재편한다기보다는, 오히려 시스템 간 순위를 뒤섞는 결과를 낳는다.
동일한 논리 구조를 공유하되 서로 다른 도메인 지식을 요구하는 동형(isomorphic) 문제 쌍으로 구성된 벤치마크 IsoSci를 제안하여, 대규모 언어 모델(LLM)의 추론 능력과 지식 검색 능력을 분리 평가한다. 실험 결과, 추론 모드에서 얻은 성능 향상의 91.3%가 구조 불변적이 아닌 지식 의존적임을 밝히며, 사고의 연쇄(Chain-of-Thought) 추론이 단기 절차적 과학 문제 해결 능력 자체를 개선한다는 기존 가정에 의문을 제기한다.
Accelerating materials discovery requires AI systems that can generate scientifically valid hypotheses through multi-step, domain-grounded reasoning. Standard large language models often produce fluent but weakly traceable responses to open-ended materials design problems, making it difficult to determine whether final answers are supported by coherent intermediate reasoning. We develop Graph-PRefLexOR, a family of graph-native reasoning models fine-tuned with Group Relative Policy Optimization (GRPO) to organize reasoning into explicit phases for mechanism exploration, graph construction, pattern extraction, and hypothesis synthesis. This design links neural language generation with symbolic relational structure, enabling causal connections to be constructed, inspected, and reused. On 100 open-ended questions from materials science and mechanics literature, Graph-PRefLexOR achieves 40-65% improvements over corresponding base models, with the largest gains in reasoning traceability. Embedding analyses show broader semantic exploration and approximately 2-3 times greater semantic diversity than baselines. Semantic backtracking and layer-wise hidden-state analyses further show stronger alignment between structured reasoning and final answers. Finally, test-time graph expansion reveals that additional compute primarily increases long-range conceptual recombination within a bounded semantic space, rather than simply expanding semantic coverage. These results establish graph-native reinforcement learning as a pathway toward interpretable AI systems for scientific hypothesis generation in materials design and other scientific applications.
We present SFBench, a benchmark dataset for evaluating systems that assess the feasibility of scientific claims. SFBench includes 197 claims in materials science, each annotated with a ground-truth feasibility score on a five-point scale along with an explanation of that assessment. The collection differs from previous collections in several important ways: 1) it defines a complex task that requires reasoning over claims of varying scientific feasibility; 2) its claims are not extracted from existing scientific publications but are created de novo, greatly reducing the chances that LLMs have trained on them; 3) claims and ground truth are established by subject matter experts, not by artificial intelligence; and 4) unlike many benchmarks that ask about question/answer pairs, provide multiple choice answers, or ask questions requiring short, fixed answers, SFBench explanations are completely open-ended. We describe the benchmark design, data creation process, and evaluation metrics, and we report baseline results using recent GPT models.
Modern artificial intelligence excels at prediction but cannot explain. From large language models to AI-for-science systems, today's machines answer what by recombining patterns already present in the human literature, yet they cannot reason out why a phenomenon must arise from underlying principles even though explanation, not prediction, lies at the heart of scientific discovery. Here we ask whether the structure of scientific explanation can be operationalized to guide how a machine generates hypotheses. We introduce DN-Hypo-Pipeline, a hypothesis-generation framework that adopts a layered, explanation-theoretic scaffold: Hempel's deductive-nomological (DN) model supplies the output form and deductive validity of a hypothesis, Salmon's causal-process account supplies an organizing constraint on where to search for the governing laws, and Armstrong's view of laws as relations between universals supplies the bridge from a phenomenon's constituent processes to the laws that may be associated with it. Rather than searching the space of what has been written, the framework searches the space of what principles govern a phenomenon: given an explanandum, it abstracts the universals instantiated in the phenomenon's formation process, retrieves the laws relating those universals, and deductively reconstructs a new, testable explanation. Evaluated in data-science modeling and judged by both LLMs and human experts, hypotheses generated through this principled reasoning significantly outperform those from direct prompting. Crucially, we translated the two highest-scoring hypotheses into novel algorithms one that reduces the Transformer's theoretical complexity with only minimal performance loss, and another that achieves competitive accuracy with substantially fewer parameters.
기반 모델이 발전하고 에이전트 스캐폴딩이 점점 정교해짐에 따라, 에이전트는 복잡하고 장기적인 코딩 작업 및 자율 실험 실행에서 놀라운 능숙함을 보여주고 있다. 연구 보조 도구에서 자율 연구 에이전트로 진화했음에도 불구하고, 이러한 시스템은 여전히 분야 민감성, 연구 윤리, 그리고 미묘한 과학적 판단에서 상당한 한계를 드러낸다. 결과적으로 프론티어 에이전트는 인간 연구자를 완전히 대체하지 못하고 있다. 이러한 격차를 해소하기 위해, 우리는 AARR(Act As a Real Researcher) 벤치마크 시리즈를 개념화한다. 거시적 수준의 실행 능력을 주로 평가하는 기존 벤치마크와 달리, AARR는 세분화된 연구 시나리오에서 에이전트가 인간 연구자의 전문성, 철저함, 그리고 미묘한 추론을 모방할 수 있는지에 초점을 맞춘다. 본 연구에서는 이 시리즈의 첫 번째 벤치마크인 AARRI-Bench(Act As a Real Research Intern)를 제안한다. 프론티어 모델과 에이전트 시스템에 걸쳐 광범위한 실험을 수행한 결과, 최고 성능 구성(Mini-SWE-Agent with Claude Opus 4.7)조차 68.3%의 성공률만을 달성하며, 실제 인간 연구자에게는 명백한 미묘하지만 중요한 세부 사항을 자주 간과하는 것으로 나타났다. 우리의 결과는 연구자와 같은 AI를 개발하기 위해서는 단순히 복잡한 스캐폴딩이 아닌 연구 행동에 대한 추가적인 탐험이 필요함을 시사한다. 데이터는 https://github.com/AARR-bench/AARRI-bench에서 공개된다.