Llama 3.1 Instruct 70B
MetaLlamaOpen WeightLlama 3.1 Community License
Description
Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.
Date de sortie
2024-07-23
Paramètres
70.0B
Longueur du contexte
131K
Modalités
text
Radar de capacités
25
general
24
coding
20
reasoning
29
science
70
agents
0
multimodal
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 484 | 13.0 | AA |
| Classement général | 451 | 28.0 | AA |
| Science | 443 | 29.0 | AA |
Scores de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
41.7%Aut.
Code
HumanEvalOpenAI (2021)
80.5%Aut.
Gorilla Benchmark API Bench
29.7%Aut.
Finance
MMLU (CoT)
86.0%Aut.
MMLU
83.6%Aut.
MMLU-Pro
66.4%Aut.
General
ARC-C
94.8%Aut.
IFEvalGoogle Research (2023)
87.5%Aut.
MBPP ++ base version
86.0%Aut.
BFCL
84.8%Aut.
Multipl-E HumanEval
65.5%Aut.
Multipl-E MBPP
62.0%Aut.
Nexus
56.7%Aut.
Math
GSM-8K (CoT)
95.1%Aut.
Multilingual MGSM (CoT)
86.9%Aut.
DROP
79.6%Aut.
MATH (CoT)
68.0%Aut.
Reasoning
API-Bank
90.0%Aut.
Indices d'évaluation AA
(Artificial Analysis)Intelligence Index(Artificial Analysis)6.5
Math Index(Artificial Analysis)4.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.6
Gpqa(NYU + Cohere + Anthropic (2023))0.4
Ifbench(Google Research (2023))0.3
Scicode(UIUC + Argonne National Lab (2024))0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.2
Aime(MAA (Mathematical Association of America))0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))0.2
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.0
Aime 25(MAA (Mathematical Association of America))0.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Scores par catégorie LLM Stats
(LLM Stats (zeroeval))Structured Output90
Instruction Following90
Legal80
Math80
Language80
Finance80
Healthcare80
Reasoning70
General70
Tool Calling70
Code60
Physics40
Biology40
Chemistry40
Tarification
Prix d'entrée$0.56 / 1M tokens
Prix de sortie$0.56 / 1M tokens
Prix mixte (3:1)$0.56 / 1M tokens
Vitesse
Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
3 fournisseurs
Moins cher: OpenRouterPlus cher: Meta
FournisseurEntréeSortie
1OpenRouterMoins cher
$0.4
$0.4
2Kilo Gateway
$0.4
$0.4
3MetaPRINCIPAL
$0.56
$0.56
Comparer les prix entre différents fournisseurs API pour ce modèle.