Saltar al contenido principal

Hermes 3 - Llama-3.1 70B

Nous ResearchLlamaOpen WeightApache 2.0 · Uso Comercial

Descripción

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

Fecha de lanzamiento
2024-08-15
Parámetros
70.0B
Longitud del contexto
131K
Modalidades
text

Radar de capacidades

20
general
20
coding
25
reasoning
27
science
24
agents
0
multimodal

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación427
20.0
AA
Ranking general483
24.0
AA
Ciencia470
26.0
AA

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)66.1%Aut.

Communication

MT-Bench8.99 / 100Aut.

Finance

MMLU79.1%Aut.
TruthfulQA63.3%Aut.
MMLU-Pro47.2%Aut.

General

PIQA84.4%Aut.
ARC-E83.0%Aut.
IFBench81.2%Aut.
ARC-C65.5%Aut.
AGIEval56.2%Aut.
OpenBookQA49.4%Aut.

Language

BoolQ88.0%Aut.
Winogrande83.2%Aut.
BBH67.8%Aut.

Math

MATH20.8%Aut.

Reasoning

HellaSwagAI2 (2019)88.2%Aut.
MuSR50.7%Aut.

Índices de evaluación AA

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
4.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.6
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.5
Gpqa(NYU + Cohere + Anthropic (2023))
0.4
Scicode(UIUC + Argonne National Lab (2024))
0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.2
Hle(Center for AI Safety + Scale AI (2025))
0.0
Aime(MAA (Mathematical Association of America))
0.0

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Roleplay
9
Communication
9
Creativity
9
Reasoning
1
General
1
Physics
80
Instruction Following
80
Language
70
Biology
70
Chemistry
70
Legal
60
Finance
60
Healthcare
60
Math
50

Precios

Precio de entrada$0.7 / 1M tokens
Precio de salida$0.7 / 1M tokens
Precio mixto (3:1)$0.7 / 1M tokens

Velocidad

Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

3 proveedores

Más barato: Nous ResearchMás caro: Kilo Gateway
ProveedorEntradaSalida
1Nous ResearchPRINCIPAL
$0.7
$0.7
2OpenRouter
$0.7
$0.7
3Kilo Gateway
$0.7
$0.7

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas