Saltar al contenido principal
AITier

Llama 3.1 Nemotron Instruct 70B

NVIDIALlamaOpen WeightLlama 3.1 Community License

Descripción

A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.

Fecha de lanzamiento
2024-10-15
Parámetros
70.0B
Longitud del contexto
128K
Modalidades
text

Radar de capacidades

25
general
17
coding
27
reasoning
33
science
24
agents
0
multimodal

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación569
11.0
AA
Ranking general496
28.0
AA
Ciencia523
24.0
AA

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

MT-Bench0.09 / 100Aut.

General

MMLU80.2%Aut.
Instruct HumanEval73.8%Aut.
TruthfulQA58.6%Aut.

Language

MMLU Chat80.6%Aut.

Math

GSM8k91.4%Aut.
GSM8K Chat81.9%Aut.

Reasoning

HellaSwagAI2 (2019)85.6%Aut.
Winogrande84.5%Aut.
ARC-C69.2%Aut.

Summarization

XLSum English31.6%Aut.

Índices de evaluación AA

(Artificial Analysis)
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
73.3
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
69.0
Gpqa(NYU + Cohere + Anthropic (2023))
46.5
Ifbench(Google Research (2023))
30.7
Aime(MAA (Mathematical Association of America))
24.7
Tau2(Sierra + U Toronto + Vector Institute (2025))
23.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))
16.9
Math Index(Artificial Analysis)
11.0
Aime 25(MAA (Mathematical Association of America))
11.0
Lcr(Artificial Analysis)
8.3
Intelligence Index(Artificial Analysis)
6.9
Terminalbench Hard(Stanford × Laude Institute (2026))
4.5
Hle(Center for AI Safety + Scale AI (2025))
4.2

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Math
90
Language
80
Legal
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Chat
10
Roleplay
10
Communication
10
Creativity
10

Precios

Precio de entradaGratis
Precio de salidaGratis
Precio mixto (3:1)Gratis

Velocidad

Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s

Ranking de Precios por Proveedor

No hay datos de proveedores disponibles

Fuentes externas

LLM StatsArtificial Analysis