DeepSeek R1 Distill Qwen 7B vs Hermes 2 Pro - Llama-3 8B
Lado a lado. Cada métrica. Cada benchmark.
| Tipo | DeepSeek R1 Distill Qwen 7B | Hermes 2 Pro - Llama-3 8B |
|---|---|---|
| Provider |  DeepSeek |  nousresearch |
| puntuación promedio | 32.7 | 22.1 |
| Precio de entrada | - | $0.14 |
| Precio de salida | - | $0.14 |
| Ventana de contexto | - | 8K tokens (~4 books) |
| Publicado el | 2025-01-20 | 2024-05-27 |
| Código abierto | Open Source | Open Source |
Puntuaciones de benchmark
6 benchmarks · DeepSeek R1 Distill Qwen 7B: 1, Hermes 2 Pro - Llama-3 8B: 5
| Benchmark | Categoría | DeepSeek R1 Distill Qwen 7B | Hermes 2 Pro - Llama-3 8B |
|---|---|---|---|
| BBH (HuggingFace) | general | 7.9 | 30.7 |
| GPQA | knowledge | 3.9 | 5.7 |
| IFEval | language | 40.4 | 53.6 |
| MATH Level 5 | math | 19.6 | 8.4 |
| MMLU-PRO | knowledge | 14.7 | 22.8 |
| MUSR | reasoning | 3.5 | 11.3 |