Passer au contenu principal

Llama 3.1 Nemotron Instruct 70B

NVIDIALlamaOpen WeightLlama 3.1 Community License

Description

A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.

Date de sortie
2024-10-15
Paramètres
70.0B
Longueur du contexte
128K
Modalités
text

Radar de capacités

25
general
18
coding
27
reasoning
30
science
24
agents
0
multimodal

Classements

Domaine#RangScoreSource
Classement codage498
11.0
AA
Classement général433
29.0
AA
Science440
29.0
AA

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Communication

MT-Bench0.09 / 100Aut.

Finance

MMLU Chat80.6%Aut.
MMLU80.2%Aut.
TruthfulQA58.6%Aut.

General

Instruct HumanEval73.8%Aut.
ARC-C69.2%Aut.

Language

Winogrande84.5%Aut.
XLSum English31.6%Aut.

Math

GSM8k91.4%Aut.
GSM8K Chat81.9%Aut.

Reasoning

HellaSwagAI2 (2019)85.6%Aut.

Indices d'évaluation AA

(Artificial Analysis)
Math Index(Artificial Analysis)
11.0
Intelligence Index(Artificial Analysis)
7.4
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.7
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.7
Gpqa(NYU + Cohere + Anthropic (2023))
0.5
Ifbench(Google Research (2023))
0.3
Aime(MAA (Mathematical Association of America))
0.2
Scicode(UIUC + Argonne National Lab (2024))
0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.2
Aime 25(MAA (Mathematical Association of America))
0.1
Lcr(Artificial Analysis)
0.1
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0
Hle(Center for AI Safety + Scale AI (2025))
0.0

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Math
90
Language
80
Legal
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Roleplay
10
Communication
10
Creativity
10

Tarification

Prix d'entrée$1.2 / 1M tokens
Prix de sortie$1.2 / 1M tokens
Prix mixte (3:1)$1.2 / 1M tokens

Vitesse

Tokens/sec82.3
Délai du premier token5.52s
Temps de réponse5.52s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

1 fournisseurs

FournisseurEntréeSortie
1NVIDIAPRINCIPAL
$1.2
$1.2

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes