Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaOpen WeightApache 2.0 · Usage Commercial
Description
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
Date de sortie
2024-08-15
Paramètres
70.0B
Longueur du contexte
131K
Modalités
text
Radar de capacités
20
general
20
coding
25
reasoning
27
science
24
agents
0
multimodal
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 427 | 20.0 | AA |
| Classement général | 483 | 24.0 | AA |
| Science | 470 | 26.0 | AA |
Scores de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
66.1%Aut.
Communication
MT-Bench
8.99 / 100Aut.
Finance
MMLU
79.1%Aut.
TruthfulQA
63.3%Aut.
MMLU-Pro
47.2%Aut.
General
PIQA
84.4%Aut.
ARC-E
83.0%Aut.
IFBench
81.2%Aut.
ARC-C
65.5%Aut.
AGIEval
56.2%Aut.
OpenBookQA
49.4%Aut.
Language
BoolQ
88.0%Aut.
Winogrande
83.2%Aut.
BBH
67.8%Aut.
Math
MATH
20.8%Aut.
Reasoning
HellaSwagAI2 (2019)
88.2%Aut.
MuSR
50.7%Aut.
Indices d'évaluation AA
(Artificial Analysis)Intelligence Index(Artificial Analysis)4.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.6
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.5
Gpqa(NYU + Cohere + Anthropic (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.2
Hle(Center for AI Safety + Scale AI (2025))0.0
Aime(MAA (Mathematical Association of America))0.0
Scores par catégorie LLM Stats
(LLM Stats (zeroeval))Roleplay9
Communication9
Creativity9
Reasoning1
General1
Physics80
Instruction Following80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
Tarification
Prix d'entrée$0.7 / 1M tokens
Prix de sortie$0.7 / 1M tokens
Prix mixte (3:1)$0.7 / 1M tokens
Vitesse
Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
3 fournisseurs
Moins cher: Nous ResearchPlus cher: Kilo Gateway
FournisseurEntréeSortie
1Nous ResearchPRINCIPAL
$0.7
$0.7
2OpenRouter
$0.7
$0.7
3Kilo Gateway
$0.7
$0.7
Comparer les prix entre différents fournisseurs API pour ce modèle.