Claude 3.5 Haiku vs Mistral Medium 3
Côte à côte. Chaque métrique. Chaque benchmark.
| Type | Claude 3.5 Haiku | Mistral Medium 3 |
|---|---|---|
| Provider |  Anthropic |  Mistral AI |
| score moyen | 37.2 | 40.0 |
| Prix d'entrée | $0.80 | $0.40 |
| Prix de sortie | $4.00 | $2.00 |
| Fenêtre de contexte | 200K tokens (~100 books) | 131K tokens (~66 books) |
| Sorti le | 2024-11-04 | 2025-05-07 |
| Code source ouvert | Proprietary | Open Source |
Scores de benchmark
4 benchmarks · Claude 3.5 Haiku: 0, Mistral Medium 3: 4
| Benchmark | Catégorie | Claude 3.5 Haiku | Mistral Medium 3 |
|---|---|---|---|
| FrontierMath-2025-02-28-Private | math | 0.3 | 0.3 |
| GPQA diamond | knowledge | 17.5 | 46.0 |
| MATH level 5 | math | 46.4 | 81.6 |
| OTIS Mock AIME 2024-2025 | math | 4.2 | 32.1 |