Hermes 3 - Llama-3.1 70B

Nous ResearchLlama오픈 웨이트Apache 2.0 · 상업적 사용 가능

설명

Hermes 3 70B is Nous Research's flagship instruction-following model, fine-tuned for advanced reasoning, creative writing, and complex task completion. It features exceptional instruction adherence and strong performance across multiple domains.

출시일

2024-08-15

파라미터

70.0B

컨텍스트 길이

131K

모달리티

text

능력 레이더

general

coding

reasoning

science추정

agents

multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인	#순위	점수	소스
코딩 랭킹	371	20.0	AA
종합 랭킹	413	25.0	AA
수학 추론	279	27.0	AA
추론	48	70.0	LS
과학	401	27.0	AA

벤치마크 점수 (LLM Stats)

Biology

GPQA

66.1%자체 보고

Communication

MT-Bench

8.99 / 100자체 보고

Finance

MMLU

79.1%자체 보고

TruthfulQA

63.3%자체 보고

MMLU-Pro

47.2%자체 보고

General

PIQA

84.4%자체 보고

ARC-E

83.0%자체 보고

IFBench

81.2%자체 보고

ARC-C

65.5%자체 보고

AGIEval

56.2%자체 보고

OpenBookQA

49.4%자체 보고

Language

BoolQ

88.0%자체 보고

Winogrande

83.2%자체 보고

BBH

67.8%자체 보고

Math

MATH

20.8%자체 보고

Reasoning

HellaSwag

88.2%자체 보고

MuSR

50.7%자체 보고

AA 평가 지수

Intelligence Index

5.1

Mmlu Pro

0.6

Math 500

0.5

Gpqa

0.4

Scicode

0.2

Livecodebench

0.2

Hle

0.0

Aime

0.0

LLM Stats 카테고리 점수

Roleplay

Communication

Creativity

General

Reasoning

Instruction Following

Physics

Language

Biology

Chemistry

Legal

Finance

Healthcare

Math

가격

입력 가격$0.3 / 1M 토큰

출력 가격$0.3 / 1M 토큰

혼합 가격 (3:1)$0.3 / 1M 토큰

속도

토큰/초30.1

첫 토큰 지연0.35s

첫 응답 지연0.35s

공급자 가격 순위

4개 공급자

최저가: Nous Research최고가: OpenRouter

공급자입력출력

1Nous Research주요

$0.3

2Kilo Gateway

$0.3

3NanoGPT

$0.408

4OpenRouter

$0.7

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크

LLM Stats Artificial Analysis