Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaОткрытые весаLlama 3.1 Community License
Описание
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
Дата выхода
2025-04-07
Параметры
253.0B
Длина контекста
128K
Модальности
text
Радар способностей
31
general
58
coding
72
reasoning
46
science
70
agents
0
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 371 | 27.0 | AA |
| Общий рейтинг | 385 | 33.0 | AA |
| Наука | 258 | 48.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
76.0%Сам.
Code
LiveCodeBench
66.3%Сам.
General
IFEvalGoogle Research (2023)
89.5%Сам.
BFCL v2
74.1%Сам.
Math
MATH-500
97.0%Сам.
AIME 2025
72.5%Сам.
Индексы оценки AA
(Artificial Analysis)Math Index(Artificial Analysis)63.7
Intelligence Index(Artificial Analysis)8.9
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))1.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime(MAA (Mathematical Association of America))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.6
Aime 25(MAA (Mathematical Association of America))0.6
Ifbench(Google Research (2023))0.4
Scicode(UIUC + Argonne National Lab (2024))0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Structured Output90
Instruction Following90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
Цены
Цена ввода$0.6 / 1M токенов
Цена вывода$1.8 / 1M токенов
Смешанная цена (3:1)$0.9 / 1M токенов
Скорость
Токенов/сек53.0
Задержка первого токена0.68s
Время до первого ответа38.40s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1NVIDIAОсновной
$0.6
$1.8
Сравнение цен разных API-провайдеров для этой модели.