Scaling Laws in Scientific Discovery with AI and Robot Scientists

이 논문은 수작업 실험과 분야 간 지식 통합이 과학 발견을 늦추는 문제를, AI agent와 embodied robot을 묶어 연구 전 과정을 자동화하는 AGS 개념과 자동화 단계 분류로 풀자고 제안했다.

이 논문은 한마디로 AI agent와 robot으로 연구 전 과정을 자동화하는 미래 시스템을 그린 position 논문이다. 저자들은 문헌 조사, 제안서 작성, 실험, 원고 작성, 성찰과 피드백의 다섯 module로 된 autonomous generalist scientist(AGS)와 Level 0부터 Level 5까지의 자동화 단계를 제시한다. 사람 연구자 수의 한계 때문에 이런 자율 시스템이 과학 발견의 새 scaling law를 만들 수 있다는 가설을 세우고, AI가 만든 연구를 받는 preprint 서버 AIXIV도 제안한다. 내용은 개념 제안과 기존 연구 정리로 이뤄진다.

핵심 요약

• 문제: 저자들은 수작업 실험이 시간과 자원을 많이 쓰고, 여러 분야를 잇는 연구는 한 연구자의 전문 범위를 넘는 지식 통합을 요구한다고 본다. LLM의 연구 활용은 대부분 물리 세계와 상호작용이 필요 없는 좁은 task나 데이터 중심 연구에 머문다. 구독 학술지 접근, 손으로 하는 실험의 데이터 수집, 실험실 장비 조작처럼 가상과 물리 영역을 넘나드는 일에서 현재 agent 시스템의 능력은 제한적이다.
• 주장: 이 논문은 개념 framework와 자동화 단계 분류를 제안하는 position 논문이다. 저자들은 agentic AI와 embodied robot을 묶어 문헌 조사부터 원고 작성까지 연구 전 과정을 가상 환경과 물리 환경 모두에서 자동화하는 autonomous generalist scientist(AGS)를 제안한다. 또 사람 연구자 수에는 한계가 있으므로, 이런 자율 시스템이 연구에 들어오면 과학 발견이 시스템의 수와 능력에 따라 정해지는 새 scaling law를 따를 수 있다는 가설을 세운다.
• 분류: 자동화 수준을 Level 0 No AI, Level 1 Tool-Assisted(ChatGPT 같은 보조 도구), Level 2 Intelligent Assistant(사람 감독 아래 웹 조사와 가상 simulation), Level 3 Collaborative Partner(robot으로 물리 실험까지 하며 사람과 협업), Level 4 Autonomous Researcher(최소한의 사람 안내), Level 5 Pioneer(사람 개입 없이 새 과학 원리 정립)의 여섯 단계로 나눈다. Level 2 예로는 OpenDevin과 DeepResearch를 들고, Level 4와 Level 5 시스템에는 각각 AGIR(Artificial General Intelligence Robots)와 ASIR(Artificial SuperIntelligence Robots)라는 이름을 붙였다.
• 구성: AGS는 Literature Review, Proposal Generation, Experimentation, Manuscript Preparation, Reflection and Feedback 다섯 module로 이뤄진다. 문헌 조사는 API 기반 도구 대신 사람처럼 화면을 읽고 마우스와 키보드를 다루는 OS agent가 구독 학술지까지 찾아 읽고, 실험 단계에서는 AI agent가 coding과 simulation 같은 가상 실험을, 범용 embodied robot이 장비 조작 같은 물리 실험을 맡는다. 제안서와 원고는 전문 평가 agent의 비평, 사람의 감독, 모의 동료 심사로 다듬는다.
• 근거와 제안: 원문은 World Bank 자료로 그린 전 세계 연구 산출과 연구 인력의 과거 추이와 전망 그림(Figure 6)을 싣는다. 자율 시스템이 만든 제안서와 논문을 사람과 AI 심사자가 여러 단계로 검토해 공개하는 preprint 서버 AIXIV(aixiv.org)도 제안한다. 공식 저장소로 확인된 GitHub 저장소의 README는 AI scientist와 robot scientist 관련 논문, survey, news, benchmark 목록을 모아 둔 자료 모음이다.
• 한계: 저자들은 Level 5 자율성이 기술, 윤리, 실용 면의 큰 과제 때문에 불확실한 장기 목표라고 밝혔다. 원고 자동화는 복잡한 데이터의 해석과 새 통찰 생성, 저자권과 AI가 만든 오류 문제를 남은 과제로 든다. 범용 robot은 여러 실험 맥락으로 일반화하는 능력과 사람과 함께 일할 때의 물리 안전이 아직 과제다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.