Beta
Classificação/GPT-4o-mini (2024-07-18)
OpenAI

GPT-4o-mini (2024-07-18)

por OpenAI · Lançado em 2024-07-18

38.5
pontuação média
$0.15/1M
Preço de entrada
$0.60/1M
Preço de saída
128K tokens (~64 books)
Janela de contexto
multimodal
Tipo

Tested on 14 benchmarks with 38.5% average. Top scores: GSM8K (91.3%), PIQA (77.4%), MMLU (75.7%).

Pontuações de benchmark

BenchmarkCategoriaPontuaçãoBar
GSM8Kmath91.3
PIQAknowledge77.4
MMLUknowledge75.7
Lech Mazur Writingknowledge67.2
GeoBenchknowledge64.0
VideoMMEmultimodal53.1
MATH level 5math52.6
Balrogknowledge17.4
GPQA diamondknowledge17.0
WeirdMLcoding11.8
OTIS Mock AIME 2024-2025math6.8
Aider polyglotcoding3.6
VPCTknowledge1.0
ARC-AGI-2reasoning0.1

Modelos similares