Llama 3.1 Instruct 70B
MetaLlamaオープンウエイトLlama 3.1 Community License
説明
Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.
リリース日
2024-07-23
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
70
general
60
coding
80
reasoning
34
science推定
70
agents
0
multimodal
専用の科学ベンチマークがない場合、Science は LLM Stats の科学スコアまたは推論能力から推定します。
ランキング
ランキングデータがありません
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
87.5%自己申告
General
BFCL
84.8%自己申告
MMLU
83.6%自己申告
Multipl-E MBPP
62.0%自己申告
Nexus
56.7%自己申告
Language
MMLU (CoT)
86.0%自己申告
MMLU-Pro
66.4%自己申告
Multipl-E HumanEval
65.5%自己申告
Math
GSM-8K (CoT)
95.1%自己申告
Multilingual MGSM (CoT)
86.9%自己申告
MATH (CoT)
68.0%自己申告
Reasoning
ARC-C
94.8%自己申告
API-Bank
90.0%自己申告
MBPP ++ base version
86.0%自己申告
HumanEvalOpenAI (2021)
80.5%自己申告
DROP
79.6%自己申告
GPQANYU + Cohere + Anthropic (2023)
41.7%自己申告
Gorilla Benchmark API Bench
29.7%自己申告
AA評価指数
(Artificial Analysis)AA評価データがありません
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Language80
Legal80
Math80
Finance80
Healthcare80
Reasoning70
General70
Tool Calling70
Code60
Physics40
Biology40
Chemistry40
価格設定
入力価格$0.56 / 1Mトークン
出力価格$0.56 / 1Mトークン
混合価格(3:1)$0.4 / 1Mトークン
速度
トークン/秒18.5
初トークン遅延2.26s
初回答遅延2.26s
プロバイダー価格ランキング
プロバイダー価格ランキング
4 プロバイダー
最安: DeepInfra最高: Kilo Gateway
プロバイダー入力出力
1DeepInfra最安
$0.4
$0.4
2Metaプライマリ
$0.56
$0.56
3OpenRouter
$0.72
$0.72
4Kilo Gateway
$0.72
$0.72
このモデルの異なるAPIプロバイダー間の価格を比較。