Mistral AI, 코딩 모델 Devstral 2와 Mistral Vibe CLI 공개
Introducing: Devstral 2 and Mistral Vibe CLI.
Mistral AI가 코딩 모델 Devstral 2(123B)와 Devstral Small 2(24B), 그리고 터미널용 CLI Mistral Vibe를 공개했다. Devstral 2는 SWE-bench Verified에서 72.2%, Devstral Small 2는 68.0%를 기록했다. Devstral 2는 API를 당분간 무료로 제공하며, 무료 기간이 끝나면 입력/출력 기준 100만 토큰당 $0.40/$2.00이 된다.
Devstral 2는 123B 파라미터의 밀집(dense) Transformer로, 256K 컨텍스트 윈도우를 지원한다. 라이선스는 수정 MIT다. Devstral Small 2는 24B 규모이며 Apache 2.0 라이선스로 공개되고, 이미지 입력도 지원해 멀티모달 에이전트를 구동할 수 있다고 한다. 회사는 DeepSeek V3.2보다 각각 5배, 28배 작고, Kimi K2보다 8배, 41배 작다고 설명했다.
평가에서는 독립 어노테이션 업체의 사람 평가를 Cline 환경에서 진행했다. DeepSeek V3.2 대비 승률은 42.8%, 패배율은 28.6%였다. 반면 Claude Sonnet 4.5가 크게 선호되어, 클로즈드 모델과의 격차가 남아 있다고 회사 측도 밝혔다. Sonnet 대비 최대 7배의 비용 효율도 주장하고 있다.
Mistral Vibe CLI는 Devstral로 구동되는 오픈소스 커맨드라인 에이전트로, Apache 2.0으로 공개된다. 파일 구조와 Git 상태를 자동으로 읽어 들이며, @를 이용한 참조, !를 이용한 셸 실행, 슬래시 명령을 사용할 수 있다. config.toml에서 로컬 모델이나 프로바이더를 설정할 수 있고, 도구 실행의 자동 승인도 전환할 수 있다. Agent Communication Protocol을 통해 IDE에 통합할 수 있으며, Zed 확장으로도 사용할 수 있다.
가격 측면에서, 무료 기간 이후 Devstral Small 2의 요금은 입력/출력 기준 $0.10/$0.30이다. Kilo Code 및 Cline과 연동된다. Devstral 2를 배포하려면 H100급 GPU가 최소 4개 필요하며, build.nvidia.com에서 시험해 볼 수 있다. Devstral Small 2는 단일 GPU에서 동작하고, GeForce RTX나 CPU만으로 구성한 환경에서도 작동한다. 권장 temperature는 0.2다.
SWE-bench Verified 점수와 함께 인간 평가에서도 Claude Sonnet 4.5와의 격차가 남아 있다고 명시하고 있어, 오픈 모델의 현재 위치를 비교하기 쉽다.
출처: Mistral AI News · mistral.ai