Google DeepMind Blog·· 2026년 8월 27일AI 점수35
Google DeepMind, 세계 최초 이중 맹검 AI 평가 시범 운영
Piloting the world's first double-blind AI evaluations
AI 요약
Google DeepMind는 Singapore AI Safety Institute, OpenMined, AVERI, MLCommons와 함께 Gemini Flash Lite를 비공개 벤치마크로 평가하는 이중 맹검 방식의 AI 평가를 시범 운영하고 있다고 밝혔다. 외부 평가 문항은 암호 기술로 만든 '상자' 안에 가둬져, 모델이 사전에 문항을 보고 성능을 최적화하는 것을 막는다. 프라이버시를 보호하는 환경에서 평가의 완전성을 높이기 위한 조치다.
출처: Google DeepMind Blog · deepmind.google