Passer au contenu principal

Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)

NVIDIALlamaOpen WeightLlama 3.1 Community License

Description

A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.

Date de sortie
2025-04-07
Paramètres
253.0B
Longueur du contexte
Modalités

Radar de capacités

31
general
58
coding
72
reasoning
47
scienceest.
70
agents
0
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage307
28.0
AA
Classement général314
34.0
AA
Raisonnement mathématique108
73.0
AA
Science192
49.0
AA

Scores de benchmarks (LLM Stats)

Biology

GPQA76.0%Aut.

Code

LiveCodeBench66.3%Aut.

General

IFEval89.5%Aut.
BFCL v274.1%Aut.

Math

MATH-50097.0%Aut.
AIME 202572.5%Aut.

Indices d'évaluation AA

Math Index
63.7
Intelligence Index
9.1
Math 500
1.0
Mmlu Pro
0.8
Aime
0.7
Gpqa
0.7
Livecodebench
0.6
Aime 25
0.6
Ifbench
0.4
Scicode
0.3
Tau2
0.1
Hle
0.1
Lcr
0.1
Terminalbench Hard
0.0

Scores par catégorie LLM Stats

Instruction Following
90
Structured Output
90
Math
80
Physics
80
Reasoning
80
General
80
Biology
80
Chemistry
80
Code
70
Tool Calling
70

Tarification

Prix d'entrée$0.6 / 1M tokens
Prix de sortie$1.8 / 1M tokens
Prix mixte (3:1)$0.9 / 1M tokens

Vitesse

Tokens/sec52.2
Délai du premier token0.70s
Temps de réponse39.03s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

3 fournisseurs

Moins cher: NVIDIAPlus cher: LLM Gateway
FournisseurEntréeSortie
1NVIDIAPRINCIPAL
$0.6
$1.8
2Nebius Token Factory
$0.6
$1.8
3LLM Gateway
$0.6
$1.8

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes