Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaOpen WeightLlama 3.1 Community License
Description
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
Date de sortie
2025-04-07
Paramètres
253.0B
Longueur du contexte
128K
Modalités
text
Radar de capacités
31
general
58
coding
72
reasoning
46
science
70
agents
0
multimodal
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 360 | 27.0 | AA |
| Classement général | 373 | 33.0 | AA |
| Science | 250 | 48.0 | AA |
Scores de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
76.0%Aut.
Code
LiveCodeBench
66.3%Aut.
General
IFEvalGoogle Research (2023)
89.5%Aut.
BFCL v2
74.1%Aut.
Math
MATH-500
97.0%Aut.
AIME 2025
72.5%Aut.
Indices d'évaluation AA
(Artificial Analysis)Math Index(Artificial Analysis)63.7
Intelligence Index(Artificial Analysis)8.9
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))1.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime(MAA (Mathematical Association of America))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.6
Aime 25(MAA (Mathematical Association of America))0.6
Ifbench(Google Research (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Scores par catégorie LLM Stats
(LLM Stats (zeroeval))Structured Output90
Instruction Following90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
Tarification
Prix d'entrée$0.6 / 1M tokens
Prix de sortie$1.8 / 1M tokens
Prix mixte (3:1)$0.9 / 1M tokens
Vitesse
Tokens/sec53.0
Délai du premier token0.70s
Temps de réponse38.45s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
1 fournisseurs
FournisseurEntréeSortie
1NVIDIAPRINCIPAL
$0.6
$1.8
Comparer les prix entre différents fournisseurs API pour ce modèle.