Passer au contenu principal

Hermes 3 - Llama-3.1 70B

Nous ResearchLlamaOpen WeightApache 2.0 · Usage Commercial

Description

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

Date de sortie
2024-08-15
Paramètres
70.0B
Longueur du contexte
—
Modalités
text

Radar de capacités

1
general
0
coding
50
reasoning
60
scienceest.
35
agents
0
multimodal

Science est estimé à partir des scores scientifiques de LLM Stats ou du raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Aucune donnée de classement disponible

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

MT-Bench8.99 / 100Aut.

General

MMLU79.1%Aut.
TruthfulQA63.3%Aut.

Instruction Following

IFBench81.2%Aut.

Language

BoolQ88.0%Aut.
MMLU-Pro47.2%Aut.

Math

MATH20.8%Aut.

Reasoning

HellaSwagAI2 (2019)88.2%Aut.
PIQA84.4%Aut.
Winogrande83.2%Aut.
ARC-E83.0%Aut.
BBH67.8%Aut.
GPQANYU + Cohere + Anthropic (2023)66.1%Aut.
ARC-C65.5%Aut.
AGIEval56.2%Aut.
MuSR50.7%Aut.
OpenBookQA49.4%Aut.

Indices d'évaluation AA

(Artificial Analysis)

Aucune donnée d'évaluation AA disponible

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Chat
9
Roleplay
9
Communication
9
Creativity
9
Reasoning
1
General
1
Instruction Following
80
Physics
80
Language
70
Biology
70
Chemistry
70
Legal
60
Finance
60
Healthcare
60
Math
50

Tarification

Prix d'entrée$0.7 / 1M tokens
Prix de sortie$0.7 / 1M tokens
Prix mixte (3:1)$0.7 / 1M tokens

Vitesse

Tokens/sec126.1
Délai du premier token0.64s
Temps de réponse0.64s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

2 fournisseurs

Moins cher: Nous ResearchPlus cher: DeepInfra
FournisseurEntréeSortie
1Nous ResearchPRINCIPAL
$0.7
$0.7
2DeepInfra
$0.7
$0.7

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes