मुख्य सामग्री पर जाएं
AITier

Hermes 3 - Llama-3.1 70B

Nous ResearchLlamaOpen WeightApache 2.0 · Commercial OK

विवरण

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

रिलीज़ तिथि
2024-08-15
पैरामीटर
70.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
text

क्षमता रडार

24
general
20
coding
25
reasoning
27
scienceअनुमानित
0
agents
0
multimodal

समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।

रैंकिंग

डोमेन#रैंकस्कोरस्रोत
Code Ranking347
20.0
AA
General Ranking382
28.0
AA
Math Reasoning279
27.0
AA
Reasoning43
70.0
LS
Science381
27.0
AA

बेंचमार्क स्कोर (LLM Stats)

Biology

GPQA66.1%स्वयं

Communication

MT-Bench8.99 / 100स्वयं

Finance

MMLU79.1%स्वयं
TruthfulQA63.3%स्वयं
MMLU-Pro47.2%स्वयं

General

PIQA84.4%स्वयं
ARC-E83.0%स्वयं
IFBench81.2%स्वयं
ARC-C65.5%स्वयं
AGIEval56.2%स्वयं
OpenBookQA49.4%स्वयं

Language

BoolQ88.0%स्वयं
Winogrande83.2%स्वयं
BBH67.8%स्वयं

Math

MATH20.8%स्वयं

Reasoning

HellaSwag88.2%स्वयं
MuSR50.7%स्वयं

AA मूल्यांकन सूचकांक

Intelligence Index
10.6
Mmlu Pro
0.6
Math 500
0.5
Gpqa
0.4
Scicode
0.2
Livecodebench
0.2
Hle
0.0
Aime
0.0

LLM Stats श्रेणी स्कोर

Communication
9
Creativity
9
Roleplay
9
General
1
Reasoning
1
Instruction Following
80
Physics
80
Biology
70
Chemistry
70
Language
70
Finance
60
Healthcare
60
Legal
60
Math
50

मूल्य निर्धारण

इनपुट मूल्य$0.3 / 1M tokens
आउटपुट मूल्य$0.3 / 1M tokens
मिश्रित मूल्य (3:1)$0.3 / 1M tokens

गति

टोकन/सेकंड30.6 tokens/s
पहले टोकन में देरी0.46s
पहले उत्तर में देरी0.46s

उपलब्ध प्रदाता

(LS आंतरिक इकाइयाँ)

कोई प्रदाता डेटा उपलब्ध नहीं

बाहरी लिंक

LLM Stats