Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaOpen WeightApache 2.0 · Uso Comercial
Descripción
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
Fecha de lanzamiento
2024-08-15
Parámetros
70.0B
Longitud del contexto
131K
Modalidades
text
Radar de capacidades
21
general
19
coding
25
reasoning
29
science
23
agents
0
multimodal
Rankings
| Dominio | #Posición | Puntuación | Fuente |
|---|---|---|---|
| Ranking de codificación | 511 | 20.0 | AA |
| Ranking general | 544 | 24.0 | AA |
| Ciencia | 576 | 20.0 | AA |
Puntuaciones de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Chat
MT-Bench
8.99 / 100Aut.
General
MMLU
79.1%Aut.
TruthfulQA
63.3%Aut.
Instruction Following
IFBench
81.2%Aut.
Language
BoolQ
88.0%Aut.
MMLU-Pro
47.2%Aut.
Math
MATH
20.8%Aut.
Reasoning
HellaSwagAI2 (2019)
88.2%Aut.
PIQA
84.4%Aut.
Winogrande
83.2%Aut.
ARC-E
83.0%Aut.
BBH
67.8%Aut.
GPQANYU + Cohere + Anthropic (2023)
66.1%Aut.
ARC-C
65.5%Aut.
AGIEval
56.2%Aut.
MuSR
50.7%Aut.
OpenBookQA
49.4%Aut.
Índices de evaluación AA
(Artificial Analysis)Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))57.1
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))53.8
Gpqa(NYU + Cohere + Anthropic (2023))40.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))18.8
Intelligence Index(Artificial Analysis)6.0
Hle(Center for AI Safety + Scale AI (2025))4.0
Aime(MAA (Mathematical Association of America))2.3
Puntuaciones por categoría LLM Stats
(LLM Stats (zeroeval))Chat9
Roleplay9
Communication9
Creativity9
Reasoning1
General1
Instruction Following80
Physics80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
Precios
Precio de entrada$0.7 / 1M tokens
Precio de salida$0.7 / 1M tokens
Precio mixto (3:1)$0.7 / 1M tokens
Velocidad
Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s
Ranking de Precios por Proveedor
Ranking de Precios por Proveedor
4 proveedores
Más barato: DeepInfraMás caro: Kilo Gateway
ProveedorEntradaSalida
1DeepInfraMás barato
$0
$0
2Nous ResearchPRINCIPAL
$0.7
$0.7
3OpenRouter
$0.7
$0.7
4Kilo Gateway
$0.7
$0.7
Comparar precios entre diferentes proveedores de API para este modelo.