DeepSeek R1 Distill Qwen 7B vs Hermes 2 Pro - Llama-3 8B
Côte à côte. Chaque métrique. Chaque benchmark.
| Type | DeepSeek R1 Distill Qwen 7B | Hermes 2 Pro - Llama-3 8B |
|---|---|---|
| Provider |  DeepSeek |  nousresearch |
| score moyen | 32.7 | 22.1 |
| Prix d'entrée | - | $0.14 |
| Prix de sortie | - | $0.14 |
| Fenêtre de contexte | - | 8K tokens (~4 books) |
| Sorti le | 2025-01-20 | 2024-05-27 |
| Code source ouvert | Open Source | Open Source |
Scores de benchmark
6 benchmarks · DeepSeek R1 Distill Qwen 7B: 1, Hermes 2 Pro - Llama-3 8B: 5
| Benchmark | Catégorie | DeepSeek R1 Distill Qwen 7B | Hermes 2 Pro - Llama-3 8B |
|---|---|---|---|
| BBH (HuggingFace) | general | 7.9 | 30.7 |
| GPQA | knowledge | 3.9 | 5.7 |
| IFEval | language | 40.4 | 53.6 |
| MATH Level 5 | math | 19.6 | 8.4 |
| MMLU-PRO | knowledge | 14.7 | 22.8 |
| MUSR | reasoning | 3.5 | 11.3 |