Saltar al contenido principal

Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)

NVIDIALlamaOpen WeightLlama 3.1 Community License

Descripción

A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.

Fecha de lanzamiento
2025-04-07
Parámetros
253.0B
Longitud del contexto
128K
Modalidades
text

Radar de capacidades

31
general
58
coding
72
reasoning
46
science
70
agents
0
multimodal

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación371
27.0
AA
Ranking general385
33.0
AA
Ciencia258
48.0
AA

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)76.0%Aut.

Code

LiveCodeBench66.3%Aut.

General

IFEvalGoogle Research (2023)89.5%Aut.
BFCL v274.1%Aut.

Math

MATH-50097.0%Aut.
AIME 202572.5%Aut.

Índices de evaluación AA

(Artificial Analysis)
Math Index(Artificial Analysis)
63.7
Intelligence Index(Artificial Analysis)
8.9
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
1.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.8
Aime(MAA (Mathematical Association of America))
0.7
Gpqa(NYU + Cohere + Anthropic (2023))
0.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.6
Aime 25(MAA (Mathematical Association of America))
0.6
Ifbench(Google Research (2023))
0.4
Scicode(UIUC + Argonne National Lab (2024))
0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.1
Lcr(Artificial Analysis)
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.1
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Structured Output
90
Instruction Following
90
Math
80
Physics
80
Reasoning
80
General
80
Biology
80
Chemistry
80
Code
70
Tool Calling
70

Precios

Precio de entrada$0.6 / 1M tokens
Precio de salida$1.8 / 1M tokens
Precio mixto (3:1)$0.9 / 1M tokens

Velocidad

Tokens/seg53.0
Retraso del primer token0.68s
Tiempo hasta la respuesta38.40s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

1 proveedores

ProveedorEntradaSalida
1NVIDIAPRINCIPAL
$0.6
$1.8

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas