Hugging Face Daily Papers·· 21일 전AI 점수43
PhysClosureBench, AI 에이전트의 물리 연구 완결도 평가
From Research Goals to Scientific Closure: Evaluating Agents Through Evidence-Supported Physics Research
AI 요약
AI 에이전트는 물리 연구에서 국소적인 과학적 성과를 내지만 연구 과제를 완전히 해결하는 단계에는 이르지 못한다는 점을 전문가가 검증한 50개 과제 벤치마크 「PhysClosureBench」가 보여줬다고 밝혔다. 평균 Atomic Score가 가장 높았던 Claude-Opus-5는 6.29/10을 기록했으나, RC4에 도달한 시행은 전체의 32.7%에 그쳤다. Atomic Score가 8/10 이상인 시행에서도 36.2%는 RC4에 도달하지 못해, 국소적 성과와 연구 완결 사이에 지속적인 격차가 있음이 드러났다.
출처: Hugging Face Daily Papers · huggingface.co