평가 출처공식 사이트
LiveBench Global Average
LiveBench · 문제 세트를 계속 교체하고 정답은 자동으로 대조할 수 있습니다. 문제가 바뀌어도 모델이 버티는지를 봅니다.
클로데이트 반영 상태교차 참고
가중치점수 미반영
원본 데이터 기준 시각10/31 07:21
마지막 동기화11/05 08:05
무엇을, 어떻게 측정하나
최신 세대(2026년 10월 이후 출시)의 공식 Global Average를 전체 참고용으로 남겨 둡니다. 공식 사이트가 Overall에 가중치를 둔 경우 그 가중치를 따릅니다. 정식 점수에는 서로 겹치지 않는 전문 과제를 사용합니다.
활용 방식
원래의 Global Average는 참고용으로 남겨 두고, 정식 표는 서로 겹치지 않는 전문 과제로 전환합니다.
결과
정해진 규칙에 따라 공개 모델마다 하나의 구성을 대표로 씁니다. 익명 테스트 모델은 표시하지 않고 원래 순위를 유지하며, 평가마다 최대 30개입니다.
| 원래 순위 | 모델 | 원래 점수 | 대표 구성 |
|---|---|---|---|
| 1 | claude-fable-5.1Anthropic | 85.7% | 출처 기본 구성 |
| 2 | gpt-6-astraOpenAI | 85.6% | 출처 기본 구성 |
| 3 | claude-opus-5.5Anthropic | 85.1% | 출처 기본 구성 |
| 4 | gpt-6.1-solOpenAI | 84.1% | 출처 기본 구성 |
| 5 | claude-sonnet-5.5Anthropic | 80.0% | 출처 기본 구성 |
| 6 | gemini-4-argonGoogle | 79.3% | 출처 기본 구성 |
| 7 | gpt-6.1-terraOpenAI | 77.8% | 출처 기본 구성 |
| 8 | muse-wonder-1.0— | 74.2% | 출처 기본 구성 |
| 9 | deepseek-v4.1-flash-1017DeepSeek | 72.9% | 출처 기본 구성 |
| 10 | kimi-k3.1-proKimi | 71.3% | 출처 기본 구성 |
| 11 | grok-4.7xAI | 70.1% | 출처 기본 구성 |
| 12 | claude-haiku-5.5Anthropic | 69.8% | 출처 기본 구성 |
| 13 | mimo-v2.6-proXiaomi | 68.5% | 출처 기본 구성 |
| 14 | gpt-5.6-terraOpenAI | 67.8% | 출처 기본 구성 |
| 15 | grok-4.6xAI | 67.8% | 출처 기본 구성 |
| 16 | minimax-m3.1-flashMiniMax | 66.9% | 출처 기본 구성 |
| 17 | gpt-6-lunaOpenAI | 64.6% | 출처 기본 구성 |
| 18 | kimi-k3Moonshot AI | 64.6% | 출처 기본 구성 |
| 19 | mistral-large-4-0Mistral AI | 63.5% | 출처 기본 구성 |
| 20 | muse-spark-1.3Meta | 63.0% | 출처 기본 구성 |
| 21 | glm-5.3-flashZ.ai | 62.1% | 출처 기본 구성 |
| 22 | qwen3.8-maxAlibaba | 61.6% | 출처 기본 구성 |
| 23 | gemini-3.8-flashGoogle | 59.2% | 출처 기본 구성 |
| 24 | step-5-previewStepFun | 58.6% | 출처 기본 구성 |
| 25 | qwen3.8-27bAlibaba | 58.4% | 출처 기본 구성 |
| 26 | muse-spark-openMeta | 51.6% | 출처 기본 구성 |
| 27 | smaug-nemotron-3.5-nvfp4— | 50.3% | 출처 기본 구성 |
| 28 | nemotron-super-vl-3.5— | 50.2% | 출처 기본 구성 |
| 29 | inklingThinking Machines Lab | 47.0% | 출처 기본 구성 |
| 30 | nemotron-super-vl-3.5-nvfp4— | 46.5% | 출처 기본 구성 |
한계와 데이터 출처
종합 평균은 특정 능력의 변화를 희석하므로 교차 참조로만 쓰고 이중 계산하지 않습니다. 운영에 관여하는 Abacus.AI는 Smaug 모델도 개발하고 있어, 그 자체 결과는 다른 독립 출처로 뒷받침되어야 합니다.
데이터 라이선스: Apache 2.0
LiveBench에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.