GPQA Diamond

Name: GPQA Diamond
Creator: Epoch AI

Epoch AI / 지식 · 대학원 수준의 물리, 화학, 생물 지식

클로데이트 반영 상태순위 반영

가중치2%

원본 데이터 기준 시각11/03 05:57

마지막 동기화11/05 08:05

무엇을, 어떻게 측정하나

Epoch가 자체적으로 다시 실행한 mean_score만 사용하며, 추론 설정과 표준 오차를 남겨 둡니다. 과학 지식 문제 198개는 추론이 필요하지만 세계 지식 전체를 대표하지는 않습니다.

정식으로 채점합니다. 같은 문제 계열은 고정 예산을 공유합니다.

정해진 규칙에 따라 공개 모델마다 하나의 구성을 대표로 씁니다. 익명 테스트 모델은 표시하지 않고 원래 순위를 유지하며, 평가마다 최대 30개입니다.

원래 순위	모델	원래 점수	대표 구성
1	gemini-4-argon_highGoogle	96.4%	High 추론
2	gpt-6-astra_maxOpenAI	95.8%	Max 추론
3	claude-sonnet-5-5_maxAnthropic	95.6%	Max 추론
4	gpt-6.1-sol_maxOpenAI	95.4%	Max 추론
4	gemini-3.8-flash_highGoogle	95.4%	High 추론
6	gemini-3.7-flash_highGoogle	94.8%	High 추론
7	gpt-5.4-pro-2026-03-05_xhighOpenAI	94.6%	xHigh 추론
8	gemini-3.1-pro-preview_highGoogle	94.4%	High 추론
9	gpt-6-sol_maxOpenAI	94.3%	Max 추론
9	gpt-6.1-terra_maxOpenAI	94.3%	Max 추론
11	gemini-3.6-flash_highGoogle	94.1%	High 추론
16	claude-opus-5_maxAnthropic	93.9%	Max 추론
17	gpt-5.6-sol_maxOpenAI	93.5%	Max 추론
18	grok-4.5_highxAI	93.4%	High 추론
19	gpt-5.6-terra_maxOpenAI	93.3%	Max 추론
20	gpt-5.4-2026-03-05_xhighOpenAI	93.3%	xHigh 추론
21	grok-4.6_xhighxAI	93.2%	xHigh 추론
21	deepseek-v4.1-flash-1017_maxDeepSeek	93.2%	Max 추론
23	kimi-k3_maxMoonshot AI	93.1%	Max 추론
23	doubao-seed-evolving_highByteDance	93.1%	High 추론
26	gemini-3.5-flash_highGoogle	92.8%	High 추론
27	grok-4.7_xhighxAI	92.7%	xHigh 추론
28	qwen3.8-max_xhighAlibaba	92.7%	xHigh 추론
29	gemini-3-pro-previewGoogle	92.6%	출처 기본 구성
30	qwen3.8-max-0902_xhighAlibaba	92.3%	xHigh 추론
32	glm-5.2_maxZ.ai	91.9%	Max 추론
33	deepseek-v4-pro-0813_maxDeepSeek	91.7%	Max 추론
34	gpt-5.6-luna_maxOpenAI	91.6%	Max 추론
35	gpt-5.2-2025-12-11_xhighOpenAI	91.4%	xHigh 추론
36	claude-opus-4-8_maxAnthropic	91.0%	Max 추론

한계와 데이터 출처

정식으로 채점합니다. 같은 문제 계열은 고정 예산을 공유합니다.

데이터 라이선스: CC BY 4.0 · Epoch AI가 자체 실시한 평가 데이터

Epoch AI에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.