U
Yi 6B
オープンソース開発元 Unknown · リリース日 2024-01-01
31.4
平均スコア
N/A
入力料金
N/A
出力料金
N/A
コンテキストウィンドウ
text
タイプ
Tested on 13 benchmarks with 31.4% average. Top scores: HellaSwag (65.9%), MMLU (52.0%), GSM8K (44.9%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| HellaSwag | knowledge | 65.9 | |
| MMLU | knowledge | 52.0 | |
| GSM8K | math | 44.9 | |
| Winogrande | knowledge | 42.6 | |
| MMLU-PRO | knowledge | 37.9 | |
| BBH (HuggingFace) | general | 35.5 | |
| ARC AI2 | knowledge | 33.7 | |
| IFEval | language | 30.5 | |
| BBH | reasoning | 29.6 | |
| GPQA | knowledge | 15.6 | |
| MUSR | reasoning | 9.7 | |
| MATH level 5 | math | 5.2 | |
| MATH Level 5 | math | 5.1 |