Llama 3.1 Instruct 405B
MetaLlama開源權重Llama 3.1 Community License
描述
Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.
發布日期
2024-07-23
參數規模
405.0B
上下文長度
—
支援模態
text
能力雷達圖
80
general
60
coding
90
reasoning
43
science估算
70
agents
0
multimodal
缺少專門科學評測時,Science 由 LLM Stats 科學得分或推理能力估算。
排行榜排名
暫無排名資料
基準測試分數 (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.6%自報
General
BFCL
88.5%自報
MMLU
87.3%自報
Multipl-E MBPP
65.7%自報
Nexus
58.7%自報
Language
MMLU (CoT)
88.6%自報
Multipl-E HumanEval
75.2%自報
MMLU-Pro
73.3%自報
Math
GSM8k
96.8%自報
Multilingual MGSM (CoT)
91.6%自報
MATH
73.8%自報
Reasoning
ARC-C
96.9%自報
API-Bank
92.0%自報
HumanEvalOpenAI (2021)
89.0%自報
MBPP EvalPlus
88.6%自報
DROP
84.8%自報
GPQANYU + Cohere + Anthropic (2023)
50.7%自報
Gorilla Benchmark API Bench
35.3%自報
AA 評測指數
(Artificial Analysis)暫無 AA 評測資料
LLM Stats 分類評分
(LLM Stats (zeroeval))Chat90
Instruction Following90
Math90
Structured Output90
Language80
Legal80
Reasoning80
Finance80
General80
Healthcare80
Tool Calling70
Code60
Physics50
Biology50
Chemistry50
定價
暫無定價資料
速度
暫無速度資料
供應商價格排行
暫無提供商資料