Gemma 2 9B
Código abertopor Google DeepMind · Lançado em 2024-06-28
40.0
pontuação média
$0.03/1M
Preço de entrada
$0.09/1M
Preço de saída
8K tokens (~4 books)
Janela de contexto
text
Tipo
Tested on 6 benchmarks with 40.0% average. Top scores: GSM8K (84.9%), PIQA (67.4%), MMLU (62.8%).
Pontuações de benchmark
| Benchmark | Categoria | Pontuação | Bar |
|---|---|---|---|
| GSM8K | math | 84.9 | |
| PIQA | knowledge | 67.4 | |
| MMLU | knowledge | 62.8 | |
| MATH level 5 | math | 21.0 | |
| GPQA diamond | knowledge | 3.3 | |
| OTIS Mock AIME 2024-2025 | math | 0.5 |