Llama 3.1 Instruct 8B
MetaLlamaオープンウエイトLlama 3.1 Community License
説明
Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.
リリース日
2024-07-23
パラメータ
8.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
19
general
8
coding
14
reasoning
20
science
50
agents
0
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 595 | 9.0 | AA |
| 総合ランキング | 568 | 21.0 | AA |
| 科学 | 636 | 13.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
80.4%自己申告
General
BFCL
76.1%自己申告
MMLU
69.4%自己申告
Multipl-E MBPP
52.4%自己申告
Nexus
38.5%自己申告
Language
MMLU (CoT)
73.0%自己申告
Multipl-E HumanEval
50.8%自己申告
MMLU-Pro
48.3%自己申告
Math
GSM-8K (CoT)
84.5%自己申告
Multilingual MGSM (CoT)
68.9%自己申告
MATH (CoT)
51.9%自己申告
Reasoning
ARC-C
83.4%自己申告
API-Bank
82.6%自己申告
MBPP EvalPlus (base)
72.8%自己申告
HumanEvalOpenAI (2021)
72.6%自己申告
DROP
59.5%自己申告
GPQANYU + Cohere + Anthropic (2023)
30.4%自己申告
Gorilla Benchmark API Bench
8.2%自己申告
AA評価指数
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))51.9
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))47.6
Ifbench(Google Research (2023))28.6
Gpqa(NYU + Cohere + Anthropic (2023))25.9
Lcr(Artificial Analysis)18.0
Tau2(Sierra + U Toronto + Vector Institute (2025))16.4
Livecodebench(UC Berkeley + MIT + Cornell (2024))11.6
Aime(MAA (Mathematical Association of America))7.7
Intelligence Index(Artificial Analysis)6.9
Coding Index(Artificial Analysis)5.4
Hle(Center for AI Safety + Scale AI (2025))5.3
Aime 25(MAA (Mathematical Association of America))4.3
Math Index(Artificial Analysis)4.3
Terminalbench V2 11.5
Terminalbench Hard(Stanford × Laude Institute (2026))0.8
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Chat80
Instruction Following80
Structured Output80
Language60
Legal60
Math60
Reasoning60
Finance60
General60
Healthcare60
Tool Calling50
Code40
Physics30
Biology30
Chemistry30
価格設定
入力価格$0.02 / 1Mトークン
出力価格$0.05 / 1Mトークン
混合価格（3:1）$0.028 / 1Mトークン
キャッシュ読み取り価格$0.025 / 1Mトークン
速度
トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s
プロバイダー価格ランキング
プロバイダー価格ランキング
2 プロバイダー
最安: DeepInfra最高: Meta
プロバイダー入力出力
1DeepInfra最安
$0
$0
2Metaプライマリ
$0.02
$0.05
このモデルの異なるAPIプロバイダー間の価格を比較。