Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaオープンウエイトApache 2.0 · 商用利用可
説明
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
リリース日
2024-08-15
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
20
general
20
coding
25
reasoning
27
science
24
agents
0
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 419 | 20.0 | AA |
| 総合ランキング | 475 | 24.0 | AA |
| 科学 | 461 | 26.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
66.1%自己申告
Communication
MT-Bench
8.99 / 100自己申告
Finance
MMLU
79.1%自己申告
TruthfulQA
63.3%自己申告
MMLU-Pro
47.2%自己申告
General
PIQA
84.4%自己申告
ARC-E
83.0%自己申告
IFBench
81.2%自己申告
ARC-C
65.5%自己申告
AGIEval
56.2%自己申告
OpenBookQA
49.4%自己申告
Language
BoolQ
88.0%自己申告
Winogrande
83.2%自己申告
BBH
67.8%自己申告
Math
MATH
20.8%自己申告
Reasoning
HellaSwagAI2 (2019)
88.2%自己申告
MuSR
50.7%自己申告
AA評価指数
(Artificial Analysis)Intelligence Index(Artificial Analysis)4.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.6
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.5
Gpqa(NYU + Cohere + Anthropic (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.2
Hle(Center for AI Safety + Scale AI (2025))0.0
Aime(MAA (Mathematical Association of America))0.0
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Roleplay9
Communication9
Creativity9
Reasoning1
General1
Instruction Following80
Physics80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
価格設定
入力価格$0.7 / 1Mトークン
出力価格$0.7 / 1Mトークン
混合価格(3:1)$0.7 / 1Mトークン
速度
トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s
プロバイダー価格ランキング
プロバイダー価格ランキング
3 プロバイダー
最安: Nous Research最高: Kilo Gateway
プロバイダー入力出力
1Nous Researchプライマリ
$0.7
$0.7
2OpenRouter
$0.7
$0.7
3Kilo Gateway
$0.7
$0.7
このモデルの異なるAPIプロバイダー間の価格を比較。