Qwen2.5 1.5B Instruct
Code source ouvertpar Alibaba · Sorti le 2024-09-17
18.4
score moyen
N/A
Prix d'entrée
N/A
Prix de sortie
N/A
Fenêtre de contexte
text-generation
Type
Tested on 6 benchmarks with 18.4% average. Top scores: IFEval (44.8%), MATH Level 5 (22.1%), MMLU-PRO (20.0%).
Scores de benchmark
| Benchmark | Catégorie | Score | Bar |
|---|---|---|---|
| IFEval | language | 44.8 | |
| MATH Level 5 | math | 22.1 | |
| MMLU-PRO | knowledge | 20.0 | |
| BBH (HuggingFace) | general | 19.8 | |
| MUSR | reasoning | 3.2 | |
| GPQA | knowledge | 0.8 |
Modèles similaires
Mistral 7B Instruct V0.2Mistral AI
18.5
GLM 4 32B z-ai
18.0
Llama 4 ScoutMeta
18.9
DeepSeek Coder 6.7BDeepSeek
16.7