Saltar al contenido principal

Llama 3.1 Instruct 405B

MetaLlamaOpen WeightLlama 3.1 Community License

Descripción

Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.

Fecha de lanzamiento
2024-07-23
Parámetros
405.0B
Longitud del contexto
—
Modalidades
text

Radar de capacidades

80
general
60
coding
90
reasoning
43
scienceest.
70
agents
0
multimodal

Science se estima a partir de las puntuaciones científicas de LLM Stats o del razonamiento cuando no hay benchmarks científicos dedicados.

Rankings

No hay datos de ranking disponibles

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.6%Aut.

General

BFCL88.5%Aut.
MMLU87.3%Aut.
Multipl-E MBPP65.7%Aut.
Nexus58.7%Aut.

Language

MMLU (CoT)88.6%Aut.
Multipl-E HumanEval75.2%Aut.
MMLU-Pro73.3%Aut.

Math

GSM8k96.8%Aut.
Multilingual MGSM (CoT)91.6%Aut.
MATH73.8%Aut.

Reasoning

ARC-C96.9%Aut.
API-Bank92.0%Aut.
HumanEvalOpenAI (2021)89.0%Aut.
MBPP EvalPlus88.6%Aut.
DROP84.8%Aut.
GPQANYU + Cohere + Anthropic (2023)50.7%Aut.
Gorilla Benchmark API Bench35.3%Aut.

Índices de evaluación AA

(Artificial Analysis)

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Math
90
Structured Output
90
Language
80
Legal
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Tool Calling
70
Code
60
Physics
50
Biology
50
Chemistry
50

Precios

No hay datos de precios disponibles

Velocidad

No hay datos de velocidad disponibles

Ranking de Precios por Proveedor

No hay datos de proveedores disponibles

Fuentes externas