Mistral Nemo
オープンソース開発元 Mistral AI · リリース日 2024-07-19
37.2
平均スコア
$0.02/1M
入力料金
$0.04/1M
出力料金
131K tokens (~66 books)
コンテキストウィンドウ
text
タイプ
Tested on 5 benchmarks with 37.2% average. Top scores: GSM8K (84.2%), PIQA (67.0%), Balrog (17.6%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| GSM8K | math | 84.2 | |
| PIQA | knowledge | 67.0 | |
| Balrog | knowledge | 17.6 | |
| MATH level 5 | math | 10.8 | |
| GPQA diamond | knowledge | 6.5 |