Llama 3.2 Instruct 1B
MetaLlama
Date de sortie
2024-09-25
Paramètres
—
Longueur du contexte
131K
Modalités
text
Radar de capacités
7
general
2
coding
4
reasoning
10
scienceest.
80
agents
0
multimodal
Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 484 | 3.0 | AA |
| Classement général | 520 | 6.0 | AA |
| Raisonnement mathématique | 350 | 2.0 | AA |
| Science | 504 | 8.0 | AA |
Scores de benchmarks (LLM Stats)
Biology
GPQA
50.5%Aut.
Code
HumanEval
88.4%Aut.
Finance
MMLU
86.0%Aut.
MMLU-Pro
68.9%Aut.
General
IFEval
92.1%Aut.
MBPP EvalPlus
87.6%Aut.
BFCL v2
77.3%Aut.
Math
MGSM
91.1%Aut.
MATH
77.0%Aut.
Indices d'évaluation AA
Intelligence Index1.1
Ifbench0.2
Mmlu Pro0.2
Gpqa0.2
Math 5000.1
Hle0.1
Lcr0.1
Livecodebench0.0
Scicode0.0
Math Index0.0
Aime0.0
Aime 250.0
Terminalbench Hard0.0
Tau20.0
Scores par catégorie LLM Stats
Instruction Following90
Structured Output90
Code90
Language80
Legal80
Math80
Reasoning80
Finance80
Healthcare80
Tool Calling80
General70
Physics50
Biology50
Chemistry50
Tarification
Prix d'entrée$0.05 / 1M tokens
Prix de sortie$0.05 / 1M tokens
Prix mixte (3:1)$0.05 / 1M tokens
Vitesse
Tokens/sec87.5
Délai du premier token0.62s
Temps de réponse0.62s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
8 fournisseurs
Moins cher: ChutesPlus cher: Vercel AI Gateway
FournisseurEntréeSortie
1ChutesMoins cher
$0.01
$0.0109
2Inference
$0.01
$0.01
3OpenRouter
$0.027
$0.201
4Kilo Gateway
$0.027
$0.2
5Cloudflare AI Gateway
$0.027
$0.2
6Cloudflare Workers AI
$0.027
$0.201
7MetaPRINCIPAL
$0.05
$0.05
8Vercel AI Gateway
$0.1
$0.1
Comparer les prix entre différents fournisseurs API pour ce modèle.