Llama 3.1 Instruct 405B
MetaLlamaオープンウエイトLlama 3.1 Community License
説明
Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.
リリース日
2024-07-23
パラメータ
405.0B
コンテキスト長
—
モダリティ
text
能力レーダー
80
general
60
coding
90
reasoning
43
science推定
70
agents
0
multimodal
専用の科学ベンチマークがない場合、Science は LLM Stats の科学スコアまたは推論能力から推定します。
ランキング
ランキングデータがありません
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.6%自己申告
General
BFCL
88.5%自己申告
MMLU
87.3%自己申告
Multipl-E MBPP
65.7%自己申告
Nexus
58.7%自己申告
Language
MMLU (CoT)
88.6%自己申告
Multipl-E HumanEval
75.2%自己申告
MMLU-Pro
73.3%自己申告
Math
GSM8k
96.8%自己申告
Multilingual MGSM (CoT)
91.6%自己申告
MATH
73.8%自己申告
Reasoning
ARC-C
96.9%自己申告
API-Bank
92.0%自己申告
HumanEvalOpenAI (2021)
89.0%自己申告
MBPP EvalPlus
88.6%自己申告
DROP
84.8%自己申告
GPQANYU + Cohere + Anthropic (2023)
50.7%自己申告
Gorilla Benchmark API Bench
35.3%自己申告
AA評価指数
(Artificial Analysis)AA評価データがありません
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Chat90
Instruction Following90
Math90
Structured Output90
Language80
Legal80
Reasoning80
Finance80
General80
Healthcare80
Tool Calling70
Code60
Physics50
Biology50
Chemistry50
価格設定
価格データがありません
速度
速度データがありません
プロバイダー価格ランキング
プロバイダーデータがありません