Перейти к основному содержанию

Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)

NVIDIALlamaOpen WeightLlama 3.1 Community License

Описание

A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.

Дата выхода
2025-04-07
Параметры
253.0B
Длина контекста
Модальности

Радар способностей

34
general
33
coding
72
reasoning
47
scienceоцен.
70
agents
0
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Домен#МестоОценкаИсточник
Code Ranking290
26.0
AA
General Ranking298
36.0
AA
Math Reasoning108
73.0
AA
Science177
50.0
AA

Оценки бенчмарков (LLM Stats)

Biology

GPQA76.0%Сам.

Code

LiveCodeBench66.3%Сам.

General

IFEval89.5%Сам.
BFCL v274.1%Сам.

Math

MATH-50097.0%Сам.
AIME 202572.5%Сам.

Индексы оценки AA

Math Index
63.7
Intelligence Index
15.0
Coding Index
13.1
Math 500
1.0
Mmlu Pro
0.8
Aime
0.7
Gpqa
0.7
Livecodebench
0.6
Aime 25
0.6
Ifbench
0.4
Scicode
0.3
Tau2
0.1
Hle
0.1
Lcr
0.1
Terminalbench Hard
0.0

Оценки категорий LLM Stats

Structured Output
90
Instruction Following
90
Biology
80
Chemistry
80
General
80
Math
80
Physics
80
Reasoning
80
Tool Calling
70
Code
70

Цены

Цена ввода$0.6 / 1M tokens
Цена вывода$1.8 / 1M tokens
Смешанная цена (3:1)$0.9 / 1M tokens

Скорость

Токенов/сек40.9 tokens/s
Задержка первого токена0.75s
Время до первого ответа49.64s

Доступные провайдеры

(Внутренние единицы LS)

Нет данных провайдеров

Внешние ссылки