평가 출처공식 사이트
Hyper-τ-bench
Sierra / 코딩 · 업무 자료를 바탕으로 실제로 작동하는 고객 서비스 에이전트를 만들고 테스트합니다.
클로데이트 반영 상태관찰 중
가중치점수 미반영
원본 데이터 기준 시각미확인
마지막 동기화아직 수집 전
무엇을, 어떻게 측정하나
에이전트 개발과 디버깅을 측정하며, 고객 서비스를 직접 수행하는 τ³-Banking과는 따로 다룹니다. 개발 도구, 실행 시간, 검수 환경을 고정하며, 시스템을 넘나들며 최고 성적을 고를 수 없습니다.
활용 방식
관찰 중: 코딩과 업무 시스템 개발을 보완할 수 있습니다. 먼저 원본 성적, 라이선스, 고정 실행 조건 심사를 마칩니다. 새로 공개되었다고 자동으로 점수에 반영하지는 않습니다.
한계와 데이터 출처
관찰 중: 코딩과 업무 시스템 개발을 보완할 수 있습니다. 먼저 원본 성적, 라이선스, 고정 실행 조건 심사를 마칩니다. 새로 공개되었다고 자동으로 점수에 반영하지는 않습니다.
데이터 라이선스: 순위 데이터 이용 범위 확인 대기
Sierra에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.