Beta
Google

Gemma 7B

Código aberto

por Google · Lançado em 2024-01-01

57.6
pontuação média
N/A
Preço de entrada
N/A
Preço de saída
N/A
Janela de contexto
text
Tipo

Tested on 10 benchmarks with 57.6% average. Top scores: HellaSwag (76.3%), TriviaQA (72.3%), OpenBookQA (71.5%).

Pontuações de benchmark

BenchmarkCategoriaPontuaçãoBar
HellaSwagknowledge76.3
TriviaQAknowledge72.3
OpenBookQAknowledge71.5
ARC AI2knowledge71.1
PIQAknowledge62.4
Winograndeknowledge58.0
MMLUknowledge54.8
GSM8Kmath46.4
BBHreasoning40.1
ANLIknowledge23.1

Modelos similares