Llama 3 Instruct 70B
MetaLlama
Fecha de lanzamiento
2024-04-18
Parámetros
—
Longitud del contexto
131K
Modalidades
text
Radar de capacidades
20
general
20
coding
22
reasoning
25
scienceest.
80
agents
0
multimodal
Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.
Rankings
| Dominio | #Posición | Puntuación | Fuente |
|---|---|---|---|
| Ranking de codificación | 463 | 7.0 | AA |
| Ranking general | 445 | 21.0 | AA |
| Razonamiento matemático | 295 | 23.0 | AA |
| Ciencia | 421 | 23.0 | AA |
Puntuaciones de benchmarks (LLM Stats)
Biology
GPQA
50.5%Aut.
Code
HumanEval
88.4%Aut.
Finance
MMLU
86.0%Aut.
MMLU-Pro
68.9%Aut.
General
IFEval
92.1%Aut.
MBPP EvalPlus
87.6%Aut.
BFCL v2
77.3%Aut.
Math
MGSM
91.1%Aut.
MATH
77.0%Aut.
Índices de evaluación AA
Intelligence Index3.5
Mmlu Pro0.6
Math 5000.5
Gpqa0.4
Ifbench0.4
Livecodebench0.2
Scicode0.2
Hle0.0
Terminalbench Hard0.0
Aime0.0
Lcr0.0
Tau20.0
Puntuaciones por categoría LLM Stats
Instruction Following90
Structured Output90
Code90
Language80
Legal80
Math80
Reasoning80
Finance80
Healthcare80
Tool Calling80
General70
Physics50
Biology50
Chemistry50
Precios
Precio de entrada$0.65 / 1M tokens
Precio de salida$2.75 / 1M tokens
Precio mixto (3:1)$1.175 / 1M tokens
Velocidad
Tokens/seg43.0
Retraso del primer token0.71s
Tiempo hasta la respuesta0.71s
Ranking de Precios por Proveedor
Ranking de Precios por Proveedor
7 proveedores
Más barato: NovitaAIMás caro: Azure
ProveedorEntradaSalida
1NovitaAIMás barato
$0.51
$0.74
2Kilo Gateway
$0.51
$0.74
3LLM Gateway
$0.51
$0.74
4MetaPRINCIPAL
$0.65
$2.75
5NanoGPT
$0.7
$0.7
6Azure Cognitive Services
$2.68
$3.54
7Azure
$2.68
$3.54
Comparar precios entre diferentes proveedores de API para este modelo.