メインコンテンツへスキップ
AITier

Llama 3.1 Instruct 70B

MetaLlamaオープンウエイトLlama 3.1 Community License

説明

Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.

リリース日
2024-07-23
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text

能力レーダー

25
general
24
coding
20
reasoning
29
science
70
agents
0
multimodal

ランキング

ドメイン#順位スコアソース
コーディングランキング480
13.0
AA
総合ランキング446
28.0
AA
科学438
29.0
AA

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)41.7%自己申告

Code

HumanEvalOpenAI (2021)80.5%自己申告
Gorilla Benchmark API Bench29.7%自己申告

Finance

MMLU (CoT)86.0%自己申告
MMLU83.6%自己申告
MMLU-Pro66.4%自己申告

General

ARC-C94.8%自己申告
IFEvalGoogle Research (2023)87.5%自己申告
MBPP ++ base version86.0%自己申告
BFCL84.8%自己申告
Multipl-E HumanEval65.5%自己申告
Multipl-E MBPP62.0%自己申告
Nexus56.7%自己申告

Math

GSM-8K (CoT)95.1%自己申告
Multilingual MGSM (CoT)86.9%自己申告
DROP79.6%自己申告
MATH (CoT)68.0%自己申告

Reasoning

API-Bank90.0%自己申告

AA評価指数

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
6.5
Math Index(Artificial Analysis)
4.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.6
Gpqa(NYU + Cohere + Anthropic (2023))
0.4
Ifbench(Google Research (2023))
0.3
Scicode(UIUC + Argonne National Lab (2024))
0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.2
Aime(MAA (Mathematical Association of America))
0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.2
Lcr(Artificial Analysis)
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.0
Aime 25(MAA (Mathematical Association of America))
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Instruction Following
90
Structured Output
90
Language
80
Legal
80
Math
80
Finance
80
Healthcare
80
Reasoning
70
General
70
Tool Calling
70
Code
60
Physics
40
Biology
40
Chemistry
40

価格設定

入力価格$0.56 / 1Mトークン
出力価格$0.56 / 1Mトークン
混合価格（3:1）$0.56 / 1Mトークン

速度

トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s

プロバイダー価格ランキング

プロバイダー価格ランキング

3 プロバイダー

最安: OpenRouter最高: Meta
プロバイダー入力出力
1OpenRouter最安
$0.4
$0.4
2Kilo Gateway
$0.4
$0.4
3Metaプライマリ
$0.56
$0.56

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク

LLM StatsArtificial Analysis