Hermes 3 - Llama-3.1 70B
Nous ResearchLlamaОткрытые весаApache 2.0 · Коммерческое использование
Описание
Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.
Дата выхода
2024-08-15
Параметры
70.0B
Длина контекста
131K
Модальности
text
Радар способностей
21
general
20
coding
25
reasoning
27
scienceоцен.
24
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 371 | 20.0 | AA |
| Общий рейтинг | 413 | 25.0 | AA |
| Математическое мышление | 279 | 27.0 | AA |
| Рассуждения | 48 | 70.0 | LS |
| Наука | 401 | 27.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
66.1%Сам.
Communication
MT-Bench
8.99 / 100Сам.
Finance
MMLU
79.1%Сам.
TruthfulQA
63.3%Сам.
MMLU-Pro
47.2%Сам.
General
PIQA
84.4%Сам.
ARC-E
83.0%Сам.
IFBench
81.2%Сам.
ARC-C
65.5%Сам.
AGIEval
56.2%Сам.
OpenBookQA
49.4%Сам.
Language
BoolQ
88.0%Сам.
Winogrande
83.2%Сам.
BBH
67.8%Сам.
Math
MATH
20.8%Сам.
Reasoning
HellaSwag
88.2%Сам.
MuSR
50.7%Сам.
Индексы оценки AA
Intelligence Index5.1
Mmlu Pro0.6
Math 5000.5
Gpqa0.4
Scicode0.2
Livecodebench0.2
Hle0.0
Aime0.0
Оценки категорий LLM Stats
Roleplay9
Communication9
Creativity9
General1
Reasoning1
Instruction Following80
Physics80
Language70
Biology70
Chemistry70
Legal60
Finance60
Healthcare60
Math50
Цены
Цена ввода$0.3 / 1M токенов
Цена вывода$0.3 / 1M токенов
Смешанная цена (3:1)$0.3 / 1M токенов
Скорость
Токенов/сек30.1
Задержка первого токена0.35s
Время до первого ответа0.35s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
4 провайдеров
Самый дешевый: Nous ResearchСамый дорогой: OpenRouter
ПровайдерВводВывод
1Nous ResearchОсновной
$0.3
$0.3
2Kilo Gateway
$0.3
$0.3
3NanoGPT
$0.408
$0.408
4OpenRouter
$0.7
$0.7
Сравнение цен разных API-провайдеров для этой модели.