Mistral Large 2407
오픈소스제공 Mistral AI · 출시일 2024-11-19
39.1
평균 점수
$2.00/1M
입력 가격
$6.00/1M
출력 가격
131K tokens (~66 books)
컨텍스트 윈도우
text
유형
Tested on 7 benchmarks with 39.1% average. Top scores: Chatbot Arena Elo — Overall (1313.3%), MMLU (73.3%), Lech Mazur Writing (69.0%).
벤치마크 점수
| 벤치마크 | 카테고리 | 점수 | Bar |
|---|---|---|---|
| Chatbot Arena Elo — Overall | arena | 1313.3 | |
| MMLU | knowledge | 73.3 | |
| Lech Mazur Writing | knowledge | 69.0 | |
| MATH level 5 | math | 44.8 | |
| GPQA diamond | knowledge | 32.0 | |
| OTIS Mock AIME 2024-2025 | math | 8.4 | |
| SimpleBench | reasoning | 7.0 |