Grok 3 Beta
제공 xAI · 출시일 2025-04-09
69.5
평균 점수
$3.00/1M
입력 가격
$15.00/1M
출력 가격
131K tokens (~66 books)
컨텍스트 윈도우
text
유형
Tested on 6 benchmarks with 69.5% average. Top scores: HELM — IFEval (88.4%), HELM — WildBench (84.9%), HELM — MMLU-Pro (78.8%).
벤치마크 점수
| 벤치마크 | 카테고리 | 점수 | Bar |
|---|---|---|---|
| HELM — IFEval | language | 88.4 | |
| HELM — WildBench | reasoning | 84.9 | |
| HELM — MMLU-Pro | knowledge | 78.8 | |
| HELM — GPQA | knowledge | 65.0 | |
| Aider polyglot | coding | 53.3 | |
| HELM — Omni-MATH | math | 46.4 |