Llama 3 Instruct 8B
MetaLlama
リリース日
2024-04-18
パラメータ
—
コンテキスト長
131K
モダリティ
text
能力レーダー
14
general
10
coding
21
reasoning
19
science推定
80
agents
0
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 483 | 3.0 | AA |
| 総合ランキング | 498 | 12.0 | AA |
| 数学的推論 | 292 | 24.0 | AA |
| 科学 | 455 | 17.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
50.5%自己申告
Code
HumanEval
88.4%自己申告
Finance
MMLU
86.0%自己申告
MMLU-Pro
68.9%自己申告
General
IFEval
92.1%自己申告
MBPP EvalPlus
87.6%自己申告
BFCL v2
77.3%自己申告
Math
MGSM
91.1%自己申告
MATH
77.0%自己申告
AA評価指数
Intelligence Index1.2
Math 5000.5
Mmlu Pro0.4
Gpqa0.3
Ifbench0.2
Scicode0.1
Livecodebench0.1
Hle0.1
Aime0.0
Lcr0.0
Terminalbench Hard0.0
Tau20.0
LLM Statsカテゴリスコア
Instruction Following90
Structured Output90
Code90
Language80
Legal80
Math80
Reasoning80
Finance80
Healthcare80
Tool Calling80
General70
Physics50
Biology50
Chemistry50
価格設定
入力価格$0.045 / 1Mトークン
出力価格$0.145 / 1Mトークン
混合価格（3:1）$0.07 / 1Mトークン
速度
トークン/秒83.7
初トークン遅延0.48s
初回答遅延0.48s
プロバイダー価格ランキング
プロバイダー価格ランキング
11 プロバイダー
最安: Kilo Gateway最高: Azure
プロバイダー入力出力
1Kilo Gateway最安
$0.03
$0.04
2NovitaAI
$0.04
$0.04
3Metaプライマリ
$0.045
$0.145
4Cloudflare AI Gateway
$0.12
$0.27
5OpenRouter
$0.14
$0.14
6Helicone
$0.14
$0.14
7LLM Gateway
$0.14
$0.14
8Together AI
$0.14
$0.14
9DigitalOcean
$0.198
$0.198
10Azure Cognitive Services
$0.3
$0.61
11Azure
$0.3
$0.61
このモデルの異なるAPIプロバイダー間の価格を比較。