Saltar al contenido principal

Llama 3.2 Instruct 1B

MetaLlama
Fecha de lanzamiento
2024-09-25
Parámetros
Longitud del contexto
131K
Modalidades
text

Radar de capacidades

7
general
1
coding
4
reasoning
10
scienceest.
80
agents
0
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación497
2.0
AA
Ranking general520
6.0
AA
Razonamiento matemático350
2.0
AA
Ciencia504
8.0
AA

Puntuaciones de benchmarks (LLM Stats)

Biology

GPQA50.5%Aut.

Code

HumanEval88.4%Aut.

Finance

MMLU86.0%Aut.
MMLU-Pro68.9%Aut.

General

IFEval92.1%Aut.
MBPP EvalPlus87.6%Aut.
BFCL v277.3%Aut.

Math

MGSM91.1%Aut.
MATH77.0%Aut.

Índices de evaluación AA

Intelligence Index
1.1
Coding Index
0.6
Ifbench
0.2
Mmlu Pro
0.2
Gpqa
0.2
Math 500
0.1
Hle
0.1
Lcr
0.1
Livecodebench
0.0
Scicode
0.0
Math Index
0.0
Aime
0.0
Aime 25
0.0
Terminalbench Hard
0.0
Tau2
0.0

Puntuaciones por categoría LLM Stats

Instruction Following
90
Structured Output
90
Code
90
Language
80
Legal
80
Math
80
Reasoning
80
Finance
80
Healthcare
80
Tool Calling
80
General
70
Physics
50
Biology
50
Chemistry
50

Precios

Precio de entrada$0.05 / 1M tokens
Precio de salida$0.05 / 1M tokens
Precio mixto (3:1)$0.05 / 1M tokens

Velocidad

Tokens/seg86.5
Retraso del primer token0.59s
Tiempo hasta la respuesta0.59s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

8 proveedores

Más barato: ChutesMás caro: Vercel AI Gateway
ProveedorEntradaSalida
1ChutesMás barato
$0.01
$0.0109
2Inference
$0.01
$0.01
3OpenRouter
$0.027
$0.201
4Kilo Gateway
$0.027
$0.2
5Cloudflare AI Gateway
$0.027
$0.2
6Cloudflare Workers AI
$0.027
$0.201
7MetaPRINCIPAL
$0.05
$0.05
8Vercel AI Gateway
$0.1
$0.1

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas