メインコンテンツへスキップ

Hermes 3 - Llama-3.1 70B

Nous ResearchLlamaオープンウエイトApache 2.0 · 商用利用可

説明

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

リリース日
2024-08-15
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text

能力レーダー

20
general
20
coding
25
reasoning
27
science
24
agents
0
multimodal

ランキング

ドメイン#順位スコアソース
コーディングランキング419
20.0
AA
総合ランキング475
24.0
AA
科学461
26.0
AA

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)66.1%自己申告

Communication

MT-Bench8.99 / 100自己申告

Finance

MMLU79.1%自己申告
TruthfulQA63.3%自己申告
MMLU-Pro47.2%自己申告

General

PIQA84.4%自己申告
ARC-E83.0%自己申告
IFBench81.2%自己申告
ARC-C65.5%自己申告
AGIEval56.2%自己申告
OpenBookQA49.4%自己申告

Language

BoolQ88.0%自己申告
Winogrande83.2%自己申告
BBH67.8%自己申告

Math

MATH20.8%自己申告

Reasoning

HellaSwagAI2 (2019)88.2%自己申告
MuSR50.7%自己申告

AA評価指数

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
4.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.6
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.5
Gpqa(NYU + Cohere + Anthropic (2023))
0.4
Scicode(UIUC + Argonne National Lab (2024))
0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.2
Hle(Center for AI Safety + Scale AI (2025))
0.0
Aime(MAA (Mathematical Association of America))
0.0

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Roleplay
9
Communication
9
Creativity
9
Reasoning
1
General
1
Instruction Following
80
Physics
80
Language
70
Biology
70
Chemistry
70
Legal
60
Finance
60
Healthcare
60
Math
50

価格設定

入力価格$0.7 / 1Mトークン
出力価格$0.7 / 1Mトークン
混合価格(3:1)$0.7 / 1Mトークン

速度

トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s

プロバイダー価格ランキング

プロバイダー価格ランキング

3 プロバイダー

最安: Nous Research最高: Kilo Gateway
プロバイダー入力出力
1Nous Researchプライマリ
$0.7
$0.7
2OpenRouter
$0.7
$0.7
3Kilo Gateway
$0.7
$0.7

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク