跳轉到主要內容

Llama 3.1 Instruct 405B

MetaLlama開源權重Llama 3.1 Community License

描述

Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.

發布日期
2024-07-23
參數規模
405.0B
上下文長度
—
支援模態
text

能力雷達圖

80
general
60
coding
90
reasoning
43
science估算
70
agents
0
multimodal

缺少專門科學評測時,Science 由 LLM Stats 科學得分或推理能力估算。

排行榜排名

暫無排名資料

基準測試分數 (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.6%自報

General

BFCL88.5%自報
MMLU87.3%自報
Multipl-E MBPP65.7%自報
Nexus58.7%自報

Language

MMLU (CoT)88.6%自報
Multipl-E HumanEval75.2%自報
MMLU-Pro73.3%自報

Math

GSM8k96.8%自報
Multilingual MGSM (CoT)91.6%自報
MATH73.8%自報

Reasoning

ARC-C96.9%自報
API-Bank92.0%自報
HumanEvalOpenAI (2021)89.0%自報
MBPP EvalPlus88.6%自報
DROP84.8%自報
GPQANYU + Cohere + Anthropic (2023)50.7%自報
Gorilla Benchmark API Bench35.3%自報

AA 評測指數

(Artificial Analysis)

暫無 AA 評測資料

LLM Stats 分類評分

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Math
90
Structured Output
90
Language
80
Legal
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Tool Calling
70
Code
60
Physics
50
Biology
50
Chemistry
50

定價

暫無定價資料

速度

暫無速度資料

供應商價格排行

暫無提供商資料

外部連結