A Society of Researchers: Designing Institutions for Populations of Autonomous Research Agents

연구 에이전트 수천~수만 개가 컴퓨팅 자원을 나눠 쓸 때, 방치하면 제멋대로 조직이 생기니 '연구 제도'(공모·심사·예산)를 미리 설계하자고 제안한 논문이다.

이 논문은 한마디로 AI 연구 에이전트 대군단을 운영하는 방법을 과학계의 제도(연구비 공모, 동료 심사, 연구실)에서 가져오자는 제안이다. 실제로 1만 명 규모 연구 에이전트 '사회'를 돌려 언어모델 사전학습 개선 과제를 맡겼더니, 한 연구실이 같은 품질을 약 30% 적은 컴퓨팅으로 달성하는 방법을 찾아냈다(다른 연구실들의 재검증은 아직 진행 중). 저자들은 목표가 아니라 역할을 주고, 검증과 다양성을 제도로 만드는 6가지 원칙을 제시했다.

핵심 요약

• 에이전트 수천 개를 방치하면 어차피 스스로 조직이 생기므로(실제 사고 사례 있음), 설계자가 명시적으로 제도를 주는 게 낫다고 주장했다.
• 연구 책임자(PI) 에이전트들이 공모에 제안하고, 독립 심사를 거쳐 컴퓨팅 예산을 배정받는 과학계 방식을 그대로 에이전트 사회에 이식했다.
• 6가지 설계 원칙을 제시했다: 목표 대신 목적 주기, 제도로 다스리기, 할당으로 통치하기, 다양성 유지, 검증 제도화, 사회의 기억.
• 1만 명 규모 에이전트 사회를 실제로 돌려, 한 연구실이 같은 품질을 약 30% 적은 컴퓨팅으로 달성하는 결과를 얻었다.
• LLM이 뽑은 연구 아이디어 4,000개 중 중복 아닌 건 약 5%뿐이라는 기존 분석 등을 근거로, 다양성과 검증 제도의 필요성을 강조했다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.