Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaオープンウエイトApache 2.0 · 商用利用可
説明
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
リリース日
2024-08-15
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
21
general
19
coding
25
reasoning
29
science
23
agents
0
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 501 | 20.0 | AA |
| 総合ランキング | 535 | 24.0 | AA |
| 科学 | 566 | 20.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Chat
MT-Bench
8.99 / 100自己申告
General
MMLU
79.1%自己申告
TruthfulQA
63.3%自己申告
Instruction Following
IFBench
81.2%自己申告
Language
BoolQ
88.0%自己申告
MMLU-Pro
47.2%自己申告
Math
MATH
20.8%自己申告
Reasoning
HellaSwagAI2 (2019)
88.2%自己申告
PIQA
84.4%自己申告
Winogrande
83.2%自己申告
ARC-E
83.0%自己申告
BBH
67.8%自己申告
GPQANYU + Cohere + Anthropic (2023)
66.1%自己申告
ARC-C
65.5%自己申告
AGIEval
56.2%自己申告
MuSR
50.7%自己申告
OpenBookQA
49.4%自己申告
AA評価指数
(Artificial Analysis)Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))57.1
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))53.8
Gpqa(NYU + Cohere + Anthropic (2023))40.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))18.8
Intelligence Index(Artificial Analysis)6.0
Hle(Center for AI Safety + Scale AI (2025))4.0
Aime(MAA (Mathematical Association of America))2.3
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Chat9
Roleplay9
Communication9
Creativity9
Reasoning1
General1
Instruction Following80
Physics80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
価格設定
入力価格$0.7 / 1Mトークン
出力価格$0.7 / 1Mトークン
混合価格（3:1）$0.7 / 1Mトークン
速度
トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s
プロバイダー価格ランキング
プロバイダー価格ランキング
4 プロバイダー
最安: DeepInfra最高: Kilo Gateway
プロバイダー入力出力
1DeepInfra最安
$0
$0
2Nous Researchプライマリ
$0.7
$0.7
3OpenRouter
$0.7
$0.7
4Kilo Gateway
$0.7
$0.7
このモデルの異なるAPIプロバイダー間の価格を比較。