Qwen2.5 1.5B Instruct
Código abiertopor Alibaba · Publicado el 2024-09-17
18.4
puntuación promedio
N/A
Precio de entrada
N/A
Precio de salida
N/A
Ventana de contexto
text-generation
Tipo
Tested on 6 benchmarks with 18.4% average. Top scores: IFEval (44.8%), MATH Level 5 (22.1%), MMLU-PRO (20.0%).
Puntuaciones de benchmark
| Benchmark | Categoría | Puntuación | Bar |
|---|---|---|---|
| IFEval | language | 44.8 | |
| MATH Level 5 | math | 22.1 | |
| MMLU-PRO | knowledge | 20.0 | |
| BBH (HuggingFace) | general | 19.8 | |
| MUSR | reasoning | 3.2 | |
| GPQA | knowledge | 0.8 |
Modelos similares
Mistral 7B Instruct V0.2Mistral AI
18.5
GLM 4 32B z-ai
18.0
Llama 4 ScoutMeta
18.9
DeepSeek Coder 6.7BDeepSeek
16.7