Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaओपन वेटApache 2.0 · व्यावसायिक उपयोग
विवरण
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
रिलीज़ तिथि
2024-08-15
पैरामीटर
70.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
text
क्षमता रडार
21
general
20
coding
25
reasoning
27
scienceअनुमानित
24
agents
0
multimodal
समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 371 | 20.0 | AA |
| सामान्य रैंकिंग | 413 | 25.0 | AA |
| गणितीय तर्क | 279 | 27.0 | AA |
| तर्क | 48 | 70.0 | LS |
| विज्ञान | 401 | 27.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
Biology
GPQA
66.1%स्वयं
Communication
MT-Bench
8.99 / 100स्वयं
Finance
MMLU
79.1%स्वयं
TruthfulQA
63.3%स्वयं
MMLU-Pro
47.2%स्वयं
General
PIQA
84.4%स्वयं
ARC-E
83.0%स्वयं
IFBench
81.2%स्वयं
ARC-C
65.5%स्वयं
AGIEval
56.2%स्वयं
OpenBookQA
49.4%स्वयं
Language
BoolQ
88.0%स्वयं
Winogrande
83.2%स्वयं
BBH
67.8%स्वयं
Math
MATH
20.8%स्वयं
Reasoning
HellaSwag
88.2%स्वयं
MuSR
50.7%स्वयं
AA मूल्यांकन सूचकांक
Intelligence Index5.1
Mmlu Pro0.6
Math 5000.5
Gpqa0.4
Scicode0.2
Livecodebench0.2
Hle0.0
Aime0.0
LLM Stats श्रेणी स्कोर
Roleplay9
Communication9
Creativity9
General1
Reasoning1
Instruction Following80
Physics80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
मूल्य निर्धारण
इनपुट मूल्य$0.3 / 1M टोकन
आउटपुट मूल्य$0.3 / 1M टोकन
मिश्रित मूल्य (3:1)$0.3 / 1M टोकन
गति
टोकन/सेकंड30.1
पहले टोकन में देरी0.35s
पहले उत्तर में देरी0.35s
प्रदाता मूल्य रैंकिंग
प्रदाता मूल्य रैंकिंग
4 प्रदाता
सबसे सस्ता: Nous Researchसबसे महंगा: OpenRouter
प्रदाताइनपुटआउटपुट
1Nous Researchप्राथमिक
$0.3
$0.3
2Kilo Gateway
$0.3
$0.3
3NanoGPT
$0.408
$0.408
4OpenRouter
$0.7
$0.7
इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।