TapTap Maker Benchmark

Name: TapTap Maker Benchmark
Creator: TapTap Maker

TapTap Maker / 코딩 · 실제 게임 엔진에서 동작하는 기능을 Lua로 작성합니다. 점수는 엔진 실행 결과로 판정하며, 다른 모델에게 채점을 맡기지 않습니다.

클로데이트 반영 상태순위 반영

가중치3.6%

원본 데이터 기준 시각11/01 09:00

마지막 동기화11/05 08:05

무엇을, 어떻게 측정하나

공식 main_board의 L2 통과율만 사용합니다. 비용, 속도, Held-out, 카테고리별 점수로 중복 투표하지 않습니다. 같은 기반 모델은 고정된 추론 설정 우선순위로 대표 행을 고르며, 선정에 점수를 쓰지 않습니다.

코딩·디자인 예산 중 3.6%입니다. 엔진과 L2 지표를 고정합니다.

정해진 규칙에 따라 공개 모델마다 하나의 구성을 대표로 씁니다. 익명 테스트 모델은 표시하지 않고 원래 순위를 유지하며, 평가마다 최대 30개입니다.

원래 순위	모델	원래 점수	대표 구성
1	gpt-6-astraOpenAI	87.2%	xHigh 추론
2	claude-fable-5-1Anthropic	86.9%	High 추론
3	claude-opus-5-5Anthropic	86.9%	xHigh 추론
4	gpt-6.1-solOpenAI	86.7%	xHigh 추론
5	gpt-6.1-terraOpenAI	85.5%	xHigh 추론
6	claude-sonnet-5-5Anthropic	84.0%	xHigh 추론
7	gemini-4-argonGoogle	83.2%	High 추론
9	deepseek-v4.1-flash-1017DeepSeek	80.3%	Max 추론
10	gemini-3.8-flashGoogle	80.1%	High 추론
11	gpt-5.6-solOpenAI	79.8%	xHigh 추론
12	grok-4.7-highxai	77.9%	High 추론
13	grok-4.7-xhighxai	77.8%	xHigh 추론
14	qwen3.8-maxAlibaba	77.5%	xHigh 추론
15	claude-haiku-5-5Anthropic	77.2%	xHigh 추론
16	gpt-6-solOpenAI	76.8%	xHigh 추론
17	kimi-k3.1-proKimi	76.8%	Max 추론
18	gpt-6-lunaOpenAI	76.6%	xHigh 추론
19	qwen3.8-max-0902Alibaba	76.2%	xHigh 추론
20	glm-5.3Z.ai	76.2%	Max 추론
21	deepseek-v4.1-flashDeepSeek	76.1%	Max 추론
22	qwen3.8-flashAlibaba	76.0%	xHigh 추론
23	gpt-5.6-terraOpenAI	75.6%	xHigh 추론
24	mimo-v2.6-proXiaomi	75.4%	출처 기본 구성
25	glm-5.3-flashZ.ai	75.0%	Max 추론
26	hy4-previewTencent	72.5%	High 추론
27	kimi-k3Moonshot AI	72.5%	출처 기본 구성
28	gpt-5.6-lunaOpenAI	72.2%	xHigh 추론
29	grok-4.5xAI	72.0%	High 추론
30	doubao-seed-evolvingByteDance	71.6%	High 추론
31	deepseek-v4-proDeepSeek	70.5%	Max 추론

한계와 데이터 출처

단일 엔진, 단일 언어라서 다른 기술 스택으로 일반화할 수 없습니다. 모델마다 다른 agent 드라이버를 썼을 수 있습니다. 비공개 harness는 문제별로 다시 계산할 수 없습니다.

데이터 라이선스: 공식 공개 결과입니다. 공개적으로 다시 표시할 때는 공식 출처 표시를 남기며, 전체 재배포 허가는 계속 이완/TapTap의 조건을 따릅니다

TapTap Maker에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.