DeepHermes 3 - Llama-3.1 8B Preview (Non-reasoning)
Nous ResearchLlama
Date de sortie
2025-02-13
Paramètres
—
Longueur du contexte
—
Modalités
—
Radar de capacités
13
general
9
coding
12
reasoning
16
scienceest.
80
agents
0
multimodal
Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 455 | 9.0 | AA |
| Classement général | 488 | 14.0 | AA |
| Raisonnement mathématique | 339 | 9.0 | AA |
| Science | 478 | 14.0 | AA |
Scores de benchmarks (LLM Stats)
Biology
GPQA
50.5%Aut.
Code
HumanEval
88.4%Aut.
Finance
MMLU
86.0%Aut.
MMLU-Pro
68.9%Aut.
General
IFEval
92.1%Aut.
MBPP EvalPlus
87.6%Aut.
BFCL v2
77.3%Aut.
Math
MGSM
91.1%Aut.
MATH
77.0%Aut.
Indices d'évaluation AA
Intelligence Index2.3
Mmlu Pro0.4
Gpqa0.3
Math 5000.2
Scicode0.1
Livecodebench0.1
Hle0.0
Aime0.0
Scores par catégorie LLM Stats
Instruction Following90
Structured Output90
Code90
Language80
Legal80
Math80
Reasoning80
Finance80
Healthcare80
Tool Calling80
General70
Physics50
Biology50
Chemistry50
Tarification
Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)Gratuit
Vitesse
Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s
Classement des Prix par Fournisseur
Aucune donnée de fournisseur disponible