Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaओपन वेटLlama 3.1 Community License
विवरण
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
रिलीज़ तिथि
2025-04-07
पैरामीटर
253.0B
संदर्भ लंबाई
128K
मोडैलिटीज़
text
क्षमता रडार
31
general
58
coding
72
reasoning
46
science
70
agents
0
multimodal
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 362 | 27.0 | AA |
| सामान्य रैंकिंग | 375 | 33.0 | AA |
| विज्ञान | 248 | 48.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
76.0%स्वयं
Code
LiveCodeBench
66.3%स्वयं
General
IFEvalGoogle Research (2023)
89.5%स्वयं
BFCL v2
74.1%स्वयं
Math
MATH-500
97.0%स्वयं
AIME 2025
72.5%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)Math Index(Artificial Analysis)63.7
Intelligence Index(Artificial Analysis)8.9
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))1.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime(MAA (Mathematical Association of America))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.6
Aime 25(MAA (Mathematical Association of America))0.6
Ifbench(Google Research (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Instruction Following90
Structured Output90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
मूल्य निर्धारण
इनपुट मूल्य$0.6 / 1M टोकन
आउटपुट मूल्य$1.8 / 1M टोकन
मिश्रित मूल्य (3:1)$0.9 / 1M टोकन
गति
टोकन/सेकंड53.0
पहले टोकन में देरी0.70s
पहले उत्तर में देरी38.44s
प्रदाता मूल्य रैंकिंग
प्रदाता मूल्य रैंकिंग
1 प्रदाता
प्रदाताइनपुटआउटपुट
1NVIDIAप्राथमिक
$0.6
$1.8
इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।