본문 바로가기
평가 출처

OpenVibeEval · 웹 작품

OpenVibeEval · 웹 작품, 접근성, 블라인드 선호를 함께 대조해 도구별 디자인 성능을 봅니다.

공식 사이트
클로데이트 반영 상태관찰 중
가중치점수 미반영
원본 데이터 기준 시각미확인
마지막 동기화아직 수집 전

무엇을, 어떻게 측정하나

모델과 harness는 따로 저장합니다. 접근성 점수는 미적 점수가 아니며, 독립된 블라인드 비교 성적과 같은 실행 조건을 검증해야 비로소 반영할 수 있습니다.

활용 방식

관찰 중: 같은 조건에서 충분한 수의 블라인드 테스트를 거친 원본 선호 데이터와 그 공개 날짜 보완이 필요합니다.

한계와 데이터 출처

모델마다 다른 실행 도구가 섞여 있습니다. 메인 표는 접근성과 과제 성과이며, 통일된 미적 투표가 아닙니다.

데이터 라이선스: 안정적인 성적 내보내기와 공개 집계 허가는 미확인입니다.

OpenVibeEval에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.