평가 출처공식 사이트
PRBench · Finance
Scale AI / 전문 업무 · 실제 금융 의사결정에 관한 질문에 답하며 전문적 판단, 추론, 위험 설명을 검증합니다.
클로데이트 반영 상태관찰 중
가중치점수 미반영
원본 데이터 기준 시각미확인
마지막 동기화아직 수집 전
무엇을, 어떻게 측정하나
Finance 전체 600문항이나 Hard 300문항 중 하나로 고정하고, 검색 도구, 추론 설정, 심사 모델 버전을 맞춥니다. 해당 문제 세트의 rubric 집계 점수를 반영하며, 전체판과 고난도 하위 세트를 이중 계산하지 않고, 전문 질의응답을 엔드투엔드 업무 과제로 취급하지도 않습니다.
활용 방식
관찰 중: 금융 분야의 전문적 판단을 보완할 수 있습니다. 문제 세트, 도구 조건, 안정적인 내보내기, 재표시 범위의 확인을 기다리고 있어 현재는 출처만 등록하며 자동 수집도 채점도 하지 않습니다.
한계와 데이터 출처
심사 모델에 의한 평가이며, 재무 모델링이나 스프레드시트 작성을 해냈다는 뜻은 아닙니다. PRBench Legal, MCP Atlas와 마찬가지로 Scale에 속하므로, 순위 수를 늘려 기관의 가중치를 높일 수는 없습니다.
데이터 라이선스: 공식 문제 세트와 평가 코드는 공개되어 있습니다. 그 라이선스가 실시간 순위 결과에 자동으로 적용되지는 않으며, 최신 결과의 안정적인 내보내기와 재표시 범위는 확인 대기.
Scale AI에서 공개한 결과입니다. 원래 점수와 클로데이트 합의 지수는 척도가 달라 직접 비교하거나 더할 수 없습니다.