Llama 3.1 Instruct 405B
MetaLlamaOpen WeightLlama 3.1 Community License
Descripción
Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.
Fecha de lanzamiento
2024-07-23
Parámetros
405.0B
Longitud del contexto
—
Modalidades
text
Radar de capacidades
80
general
60
coding
90
reasoning
43
scienceest.
70
agents
0
multimodal
Science se estima a partir de las puntuaciones científicas de LLM Stats o del razonamiento cuando no hay benchmarks científicos dedicados.
Rankings
No hay datos de ranking disponibles
Puntuaciones de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.6%Aut.
General
BFCL
88.5%Aut.
MMLU
87.3%Aut.
Multipl-E MBPP
65.7%Aut.
Nexus
58.7%Aut.
Language
MMLU (CoT)
88.6%Aut.
Multipl-E HumanEval
75.2%Aut.
MMLU-Pro
73.3%Aut.
Math
GSM8k
96.8%Aut.
Multilingual MGSM (CoT)
91.6%Aut.
MATH
73.8%Aut.
Reasoning
ARC-C
96.9%Aut.
API-Bank
92.0%Aut.
HumanEvalOpenAI (2021)
89.0%Aut.
MBPP EvalPlus
88.6%Aut.
DROP
84.8%Aut.
GPQANYU + Cohere + Anthropic (2023)
50.7%Aut.
Gorilla Benchmark API Bench
35.3%Aut.
Índices de evaluación AA
(Artificial Analysis)No hay datos de evaluación AA disponibles
Puntuaciones por categoría LLM Stats
(LLM Stats (zeroeval))Chat90
Instruction Following90
Math90
Structured Output90
Language80
Legal80
Reasoning80
Finance80
General80
Healthcare80
Tool Calling70
Code60
Physics50
Biology50
Chemistry50
Precios
No hay datos de precios disponibles
Velocidad
No hay datos de velocidad disponibles
Ranking de Precios por Proveedor
No hay datos de proveedores disponibles