평가 출처공식 사이트
ToneBench · 문체와 대본
Towards AI · 지정된 작가의 문체로 영상 대본을 쓰게 하고 도입, 구성, 표현, 낭독 리듬을 봅니다.
클로데이트 반영 상태관찰 중
가중치점수 미반영
원본 데이터 기준 시각미확인
마지막 동기화아직 수집 전
무엇을, 어떻게 측정하나
실제 대본 과제 10건, 여러 차례 생성, 3개 회사의 심사 모델을 사용합니다. 같은 과제, rubric, 심사 모델, 실행 핑거프린트 범위 안에서만 비교합니다. 혼합 모델 폴백 행은 제외하며, 열마다 최고 성적을 골라 구성을 정하지 않습니다.
활용 방식
관찰 중: 데이터 계약과 이번 기간 커버 범위는 비교적 양호합니다. 성적 표시 범위를 확인하고 단일 모델 구성을 검증한 뒤에 다룹니다.
한계와 데이터 출처
Towards AI 단일 채널의 문체에 치우쳐 있고, 정확한 과제와 참고 대본은 비공개입니다. 현재 1위는 Fable 5에 Opus 4.8 폴백이 포함되어 있어 단일 모델 성적으로 볼 수 없습니다.
데이터 라이선스: 공개 JSON은 읽을 수 있지만, 데이터 집계와 재표시에 관한 명확한 조건은 찾지 못했습니다.
Towards AI에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.