Llama 3.1 Instruct 405B
MetaLlamaOpen WeightLlama 3.1 Community License
Description
Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.
Date de sortie
2024-07-23
Paramètres
405.0B
Longueur du contexte
—
Modalités
text
Radar de capacités
80
general
60
coding
90
reasoning
43
scienceest.
70
agents
0
multimodal
Science est estimé à partir des scores scientifiques de LLM Stats ou du raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.
Classements
Aucune donnée de classement disponible
Scores de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.6%Aut.
General
BFCL
88.5%Aut.
MMLU
87.3%Aut.
Multipl-E MBPP
65.7%Aut.
Nexus
58.7%Aut.
Language
MMLU (CoT)
88.6%Aut.
Multipl-E HumanEval
75.2%Aut.
MMLU-Pro
73.3%Aut.
Math
GSM8k
96.8%Aut.
Multilingual MGSM (CoT)
91.6%Aut.
MATH
73.8%Aut.
Reasoning
ARC-C
96.9%Aut.
API-Bank
92.0%Aut.
HumanEvalOpenAI (2021)
89.0%Aut.
MBPP EvalPlus
88.6%Aut.
DROP
84.8%Aut.
GPQANYU + Cohere + Anthropic (2023)
50.7%Aut.
Gorilla Benchmark API Bench
35.3%Aut.
Indices d'évaluation AA
(Artificial Analysis)Aucune donnée d'évaluation AA disponible
Scores par catégorie LLM Stats
(LLM Stats (zeroeval))Chat90
Instruction Following90
Math90
Structured Output90
Language80
Legal80
Reasoning80
Finance80
General80
Healthcare80
Tool Calling70
Code60
Physics50
Biology50
Chemistry50
Tarification
Aucune donnée de prix disponible
Vitesse
Aucune donnée de vitesse disponible
Classement des Prix par Fournisseur
Aucune donnée de fournisseur disponible