Rebuilding a Field's Open-Problem Catalog from the Literature: A Two-Layer Knowledge Graph, and Why Status Must Stay Proposed

이 논문은 연구 분야의 미해결 문제 목록을 데이터로 만들어, 문헌 색인으로 지식그래프 증거층을 얹고 질의 가능하게 만드는 두 층 구조를 제안했다.

이 논문은 한마디로 연구 분야의 미해결 문제를 데이터로 바꾸고 문헌 기반 증거층과 묶어 그래프 질의로 만든 연구다. 손으로 만든 문제 카탈로그 층은 그대로 보존하고, 그 아래에 서지 색인으로 재구축한 증거층을 붙였다. 언어 모델의 상태 판정은 감사에서 대부분 부정확했고, 저자는 이 실패를 그대로 보고했다. 이에 따라 상태 변경은 증거를 붙인 제안으로만 남기고 사람 검토자를 구조의 일부로 만들어야 한다고 결론지었다.

핵심 요약

• 데이터베이스 연구 1,053 문제와 AI 연구 1,000 문제의 두 카탈로그에 증거층을 얹은 그래프를 만들었다.
• 재구축한 그래프는 기존 카탈로그 그래프가 답한 질문을 그대로 유지했고, 데이터베이스에서 47 of 47, AI에서 34 of 35가 같은 답을 냈다.
• 증거층은 카탈로그 큐레이터가 인용한 적 없는 바깥 문헌까지 연결해서, 336 문제에 770 편의 관련 논문을 붙였다.
• 상태 판정 감사에서 41개 판정 가운데 9개만 정확했고 30개는 부분 정확, 2개는 틀렸으며 반박 판정은 0 of 34로 미해결 문제를 실제로 반박하지 못했다.
• 저자는 설계 결론으로 상태 변경은 증거와 함께 제안으로만 남기고 사람 검토자를 구조의 일부로 만들어야 한다고 썼다.
• 레이블 충돌 결함으로 논문 수 집계가 2,679 대신 8,769로 잘못 커진 사례를 보고하고, 빌드 시점에 이 충돌을 오류로 막도록 고쳤다.

논문 링크

외부 연구를 정리한 자료입니다. HDATF가 발표한 논문이나 제품 성능을 측정한 결과는 아닙니다.