Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaオープンウエイトLlama 3.1 Community License
説明
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
リリース日
2025-04-07
パラメータ
253.0B
コンテキスト長
128K
モダリティ
text
能力レーダー
31
general
58
coding
72
reasoning
46
science
70
agents
0
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 360 | 27.0 | AA |
| 総合ランキング | 373 | 33.0 | AA |
| 科学 | 250 | 48.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
76.0%自己申告
Code
LiveCodeBench
66.3%自己申告
General
IFEvalGoogle Research (2023)
89.5%自己申告
BFCL v2
74.1%自己申告
Math
MATH-500
97.0%自己申告
AIME 2025
72.5%自己申告
AA評価指数
(Artificial Analysis)Math Index(Artificial Analysis)63.7
Intelligence Index(Artificial Analysis)8.9
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))1.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime(MAA (Mathematical Association of America))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.6
Aime 25(MAA (Mathematical Association of America))0.6
Ifbench(Google Research (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Instruction Following90
Structured Output90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
価格設定
入力価格$0.6 / 1Mトークン
出力価格$1.8 / 1Mトークン
混合価格(3:1)$0.9 / 1Mトークン
速度
トークン/秒53.1
初トークン遅延0.70s
初回答遅延38.37s
プロバイダー価格ランキング
プロバイダー価格ランキング
1 プロバイダー
プロバイダー入力出力
1NVIDIAプライマリ
$0.6
$1.8
このモデルの異なるAPIプロバイダー間の価格を比較。