DeepSeek Coder 6.7B
オープンソース開発元 DeepSeek · リリース日 2024-01-01
16.7
平均スコア
N/A
入力料金
N/A
出力料金
N/A
コンテキストウィンドウ
text
タイプ
Tested on 4 benchmarks with 16.7% average. Top scores: GSM8K (21.3%), ARC AI2 (15.2%), MMLU (15.2%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| GSM8K | math | 21.3 | |
| ARC AI2 | knowledge | 15.2 | |
| MMLU | knowledge | 15.2 | |
| Winogrande | knowledge | 15.2 |