メインコンテンツへスキップ
AITier

Llama 3.1 Instruct 8B

MetaLlamaオープンウエイトLlama 3.1 Community License

説明

Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.

リリース日
2024-07-23
パラメータ
8.0B
コンテキスト長
131K
モダリティ
text

能力レーダー

19
general
8
coding
14
reasoning
17
science
50
agents
0
multimodal

ランキング

ドメイン#順位スコアソース
コーディングランキング502
10.0
AA
総合ランキング488
22.0
AA
科学523
16.0
AA

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)30.4%自己申告

Code

HumanEvalOpenAI (2021)72.6%自己申告
Gorilla Benchmark API Bench8.2%自己申告

Finance

MMLU (CoT)73.0%自己申告
MMLU69.4%自己申告
MMLU-Pro48.3%自己申告

General

ARC-C83.4%自己申告
IFEvalGoogle Research (2023)80.4%自己申告
BFCL76.1%自己申告
MBPP EvalPlus (base)72.8%自己申告
Multipl-E MBPP52.4%自己申告
Multipl-E HumanEval50.8%自己申告
Nexus38.5%自己申告

Math

GSM-8K (CoT)84.5%自己申告
Multilingual MGSM (CoT)68.9%自己申告
DROP59.5%自己申告
MATH (CoT)51.9%自己申告

Reasoning

API-Bank82.6%自己申告

AA評価指数

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
7.4
Coding Index(Artificial Analysis)
5.4
Math Index(Artificial Analysis)
4.3
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.5
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.5
Ifbench(Google Research (2023))
0.3
Gpqa(NYU + Cohere + Anthropic (2023))
0.3
Lcr(Artificial Analysis)
0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.2
Scicode(UIUC + Argonne National Lab (2024))
0.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.1
Aime(MAA (Mathematical Association of America))
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.1
Aime 25(MAA (Mathematical Association of America))
0.0
Terminalbench V2 1
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Instruction Following
80
Structured Output
80
Language
60
Legal
60
Math
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Tool Calling
50
Code
40
Physics
30
Biology
30
Chemistry
30

価格設定

入力価格$0.02 / 1Mトークン
出力価格$0.05 / 1Mトークン
混合価格（3:1）$0.028 / 1Mトークン
キャッシュ読み取り価格$0.025 / 1Mトークン

速度

トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s

プロバイダー価格ランキング

プロバイダー価格ランキング

1 プロバイダー

プロバイダー入力出力
1Metaプライマリ
$0.02
$0.05

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク

LLM StatsArtificial Analysis