가설이 이어지는 AI 과학 탐구에서는 올바른 질문이 발견의 열쇠다
Asking the right question is key to AI discovery in a chain of hypotheses
한국어 초록
인공지능(AI) 과학자는 일련의 가설을 세워 발견을 시도한다. 후보 모델을 기존 관측값에 맞추고, 흔히 모델 간 예측 차이가 가장 큰 곳에서 실험한다. 하지만 초기 데이터가 폭이 좁은 특징을 놓치면 관측하지 않은 구간에서 서로 비슷한 예측을 내는 단순한 곡선이 선택되기 쉽다. 그 결과 모델 간 불일치를 따르는 탐색은 새 현상이 있는 지점을 조사하지 않는다. 초기 데이터에서 좁은 봉우리 하나를 제외한 뒤 Claude Sonnet 5.5와 GPT-6.1-Sol 두 최첨단 AI 과학자로 폐루프 실험 32회를 수행했다. 두 모델 모두 무작위 탐색보다 봉우리 영역을 덜 자주 표본으로 삼았다. 모델 간 불일치를 더 충실히 따른 에이전트는 32회 모두에서 봉우리를 놓쳤다. 반면 측정하지 않은 구간을 초기에 살펴보고 이상 현상이 나타난 범위를 추가로 조사했을 때는 발견에 성공했다. 따라서 가설이 이어지는 AI 과학 탐구에서는 현재 모델의 예측이 갈리는 곳만 시험하기보다 올바른 질문을 던지는 일이 중요하다.
원문 초록
Artificial intelligence (AI) scientists pursue discovery through a chain of hypotheses, fitting candidate models to existing observations and often choosing experiments where those models disagree most. Yet when early data miss a narrow feature, model selection favors simple curves that agree across the unmea- sured gap, so disagreement-guided search has no reason to look where the new phenomenon lies. When we tested two frontier AI scientists, Claude Sonnet 5.5 and GPT-6.1-Sol, across 32 closed-loop trials with a narrow peak omitted from the starting data, both sampled inside the peak region less often than random search. Surprisingly, the agent that followed model disagreement more closely missed the peak in all 32 trials, whereas discovery succeeded when experiments probed the unmeasured gap early and followed up across the anomaly. Asking the right question, rather than testing only where current models disagree, is therefore key to AI discovery in a chain of hypotheses.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.19841v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.