Mistral Small 3.1 24B
오픈소스제공 Mistral AI · 출시일 2025-03-17
55.8
평균 점수
$0.35/1M
입력 가격
$0.56/1M
출력 가격
128K tokens (~64 books)
컨텍스트 윈도우
multimodal
유형
Tested on 5 benchmarks with 55.8% average. Top scores: HELM — WildBench (78.8%), HELM — IFEval (75.0%), HELM — MMLU-Pro (61.0%).
벤치마크 점수
| 벤치마크 | 카테고리 | 점수 | Bar |
|---|---|---|---|
| HELM — WildBench | reasoning | 78.8 | |
| HELM — IFEval | language | 75.0 | |
| HELM — MMLU-Pro | knowledge | 61.0 | |
| HELM — GPQA | knowledge | 39.2 | |
| HELM — Omni-MATH | math | 24.8 |
유사 모델
Alibaba Qwen
55.9
OpenAI
56.0
DeepSeek
56.0
OpenAI
56.2