Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaОткрытые весаLlama 3.1 Community License
Описание
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
Дата выхода
2025-04-07
Параметры
253.0B
Длина контекста
128K
Модальности
text
Радар способностей
30
general
64
coding
72
reasoning
53
science
70
agents
0
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 387 | 37.0 | AA |
| Общий рейтинг | 458 | 31.0 | AA |
| Наука | 356 | 42.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
89.5%Сам.
General
BFCL v2
74.1%Сам.
Math
MATH-500
97.0%Сам.
AIME 2025
72.5%Сам.
Reasoning
GPQANYU + Cohere + Anthropic (2023)
76.0%Сам.
LiveCodeBench
66.3%Сам.
Индексы оценки AA
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))95.2
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))82.5
Aime(MAA (Mathematical Association of America))74.7
Gpqa(NYU + Cohere + Anthropic (2023))72.8
Livecodebench(UC Berkeley + MIT + Cornell (2024))64.1
Math Index(Artificial Analysis)63.7
Aime 25(MAA (Mathematical Association of America))63.7
Ifbench(Google Research (2023))38.2
Tau2(Sierra + U Toronto + Vector Institute (2025))11.4
Intelligence Index(Artificial Analysis)7.5
Hle(Center for AI Safety + Scale AI (2025))7.4
Terminalbench Hard(Stanford × Laude Institute (2026))2.3
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Math80
Physics80
Reasoning80
General80
Biology80
Chemistry80
Code70
Tool Calling70
Цены
Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Нет данных провайдеров