Hermes 3 - Llama-3.1 70B

Nous ResearchLlamaOpen WeightApache 2.0 · Commercial OK

描述

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

發布日期

2024-08-15

參數規模

70.0B

上下文長度

131K

支援模態

text

能力雷達圖

general

coding

reasoning

science估算

agents

multimodal

Science 在缺少專門科學評測時使用推理能力代理估算。

排行榜排名

領域	#排名	分數	來源
代码能力榜	347	20.0	AA
通用能力榜	382	28.0	AA
数学推理	279	27.0	AA
推理能力	43	70.0	LS
科学能力	381	27.0	AA

基準測試分數 (LLM Stats)

Biology

GPQA

66.1%自報

Communication

MT-Bench

8.99 / 100自報

Finance

MMLU

79.1%自報

TruthfulQA

63.3%自報

MMLU-Pro

47.2%自報

General

PIQA

84.4%自報

ARC-E

83.0%自報

IFBench

81.2%自報

ARC-C

65.5%自報

AGIEval

56.2%自報

OpenBookQA

49.4%自報

Language

BoolQ

88.0%自報

Winogrande

83.2%自報

BBH

67.8%自報

Math

MATH

20.8%自報

Reasoning

HellaSwag

88.2%自報

MuSR

50.7%自報

AA 評測指數

Intelligence Index

10.6

Mmlu Pro

0.6

Math 500

0.5

Gpqa

0.4

Scicode

0.2

Livecodebench

0.2

Hle

0.0

Aime

0.0

LLM Stats 分類評分

Communication

Creativity

Roleplay

General

Reasoning

Instruction Following

Physics

Biology

Chemistry

Language

Finance

Healthcare

Legal

Math

定價

輸入價格$0.3 / 1M tokens

輸出價格$0.3 / 1M tokens

混合價格(3:1)$0.3 / 1M tokens

速度

Tokens/秒30.6 tokens/s

首Token延遲0.46s

首回答延遲0.46s

可用提供商

(LS 內部計價單位)

暫無提供商資料

外部連結

LLM Stats