Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaओपन वेटLlama 3.1 Community License
विवरण
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
रिलीज़ तिथि
2025-04-07
पैरामीटर
253.0B
संदर्भ लंबाई
128K
मोडैलिटीज़
text
क्षमता रडार
30
general
64
coding
72
reasoning
53
science
70
agents
0
multimodal
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 387 | 37.0 | AA |
| सामान्य रैंकिंग | 458 | 31.0 | AA |
| विज्ञान | 356 | 42.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
89.5%स्वयं
General
BFCL v2
74.1%स्वयं
Math
MATH-500
97.0%स्वयं
AIME 2025
72.5%स्वयं
Reasoning
GPQANYU + Cohere + Anthropic (2023)
76.0%स्वयं
LiveCodeBench
66.3%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))95.2
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))82.5
Aime(MAA (Mathematical Association of America))74.7
Gpqa(NYU + Cohere + Anthropic (2023))72.8
Livecodebench(UC Berkeley + MIT + Cornell (2024))64.1
Math Index(Artificial Analysis)63.7
Aime 25(MAA (Mathematical Association of America))63.7
Ifbench(Google Research (2023))38.2
Tau2(Sierra + U Toronto + Vector Institute (2025))11.4
Intelligence Index(Artificial Analysis)7.5
Hle(Center for AI Safety + Scale AI (2025))7.4
Terminalbench Hard(Stanford × Laude Institute (2026))2.3
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
मूल्य निर्धारण
इनपुट मूल्यमुफ्त
आउटपुट मूल्यमुफ्त
मिश्रित मूल्य (3:1)मुफ्त
गति
टोकन/सेकंड0.0
पहले टोकन में देरी0.00s
पहले उत्तर में देरी0.00s
प्रदाता मूल्य रैंकिंग
कोई प्रदाता डेटा उपलब्ध नहीं