Llama 3 Instruct 8B
MetaLlama
Fecha de lanzamiento
2024-04-18
Parámetros
—
Longitud del contexto
131K
Modalidades
text
Radar de capacidades
14
general
10
coding
21
reasoning
19
scienceest.
80
agents
0
multimodal
Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.
Rankings
| Dominio | #Posición | Puntuación | Fuente |
|---|---|---|---|
| Ranking de codificación | 483 | 3.0 | AA |
| Ranking general | 498 | 12.0 | AA |
| Razonamiento matemático | 292 | 24.0 | AA |
| Ciencia | 455 | 17.0 | AA |
Puntuaciones de benchmarks (LLM Stats)
Biology
GPQA
50.5%Aut.
Code
HumanEval
88.4%Aut.
Finance
MMLU
86.0%Aut.
MMLU-Pro
68.9%Aut.
General
IFEval
92.1%Aut.
MBPP EvalPlus
87.6%Aut.
BFCL v2
77.3%Aut.
Math
MGSM
91.1%Aut.
MATH
77.0%Aut.
Índices de evaluación AA
Intelligence Index1.2
Math 5000.5
Mmlu Pro0.4
Gpqa0.3
Ifbench0.2
Scicode0.1
Livecodebench0.1
Hle0.1
Aime0.0
Lcr0.0
Terminalbench Hard0.0
Tau20.0
Puntuaciones por categoría LLM Stats
Instruction Following90
Structured Output90
Code90
Language80
Legal80
Math80
Reasoning80
Finance80
Healthcare80
Tool Calling80
General70
Physics50
Biology50
Chemistry50
Precios
Precio de entrada$0.045 / 1M tokens
Precio de salida$0.145 / 1M tokens
Precio mixto (3:1)$0.07 / 1M tokens
Velocidad
Tokens/seg83.7
Retraso del primer token0.48s
Tiempo hasta la respuesta0.48s
Ranking de Precios por Proveedor
Ranking de Precios por Proveedor
11 proveedores
Más barato: Kilo GatewayMás caro: Azure
ProveedorEntradaSalida
1Kilo GatewayMás barato
$0.03
$0.04
2NovitaAI
$0.04
$0.04
3MetaPRINCIPAL
$0.045
$0.145
4Cloudflare AI Gateway
$0.12
$0.27
5OpenRouter
$0.14
$0.14
6Helicone
$0.14
$0.14
7LLM Gateway
$0.14
$0.14
8Together AI
$0.14
$0.14
9DigitalOcean
$0.198
$0.198
10Azure Cognitive Services
$0.3
$0.61
11Azure
$0.3
$0.61
Comparar precios entre diferentes proveedores de API para este modelo.