Qwen2 1.5B Instruct
Código abiertopor Alibaba · Publicado el 2024-06-03
14.1
puntuación promedio
N/A
Precio de entrada
N/A
Precio de salida
N/A
Ventana de contexto
text-generation
Tipo
Tested on 6 benchmarks with 14.1% average. Top scores: IFEval (33.7%), MMLU-PRO (16.7%), BBH (HuggingFace) (13.7%).
Puntuaciones de benchmark
| Benchmark | Categoría | Puntuación | Bar |
|---|---|---|---|
| IFEval | language | 33.7 | |
| MMLU-PRO | knowledge | 16.7 | |
| BBH (HuggingFace) | general | 13.7 | |
| MUSR | reasoning | 12.0 | |
| MATH Level 5 | math | 7.2 | |
| GPQA | knowledge | 1.6 |
Modelos similares
Qwen2.5 Coder 0.5B InstructAlibaba
14.3
Llama 3.2 1B InstructMeta
14.5
QwQ 32BAlibaba Qwen
13.5
HF
SmolLM2 135M InstructHugging Face TB
15.0