Llama 3.1 Nemotron Ultra 253B v1 (Reasoning)
NVIDIALlamaOpen WeightLlama 3.1 Community License
설명
A 253B parameter derivative of Meta Llama 3.1 405B Instruct, developed by NVIDIA using Neural Architecture Search (NAS) and vertical compression. It underwent multi-phase post-training (SFT for Math, Code, Reasoning, Chat, Tool Calling; RL with GRPO) to enhance reasoning and instruction-following. Optimized for accuracy/efficiency tradeoff on NVIDIA GPUs. Supports 128k context.
출시일
2025-04-07
파라미터
253.0B
컨텍스트 길이
—
모달리티
—
능력 레이더
34
general
33
coding
72
reasoning
47
science추정
70
agents
0
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Code Ranking | 290 | 26.0 | AA |
| General Ranking | 298 | 36.0 | AA |
| Math Reasoning | 108 | 73.0 | AA |
| Science | 177 | 50.0 | AA |
벤치마크 점수 (LLM Stats)
Biology
GPQA
76.0%자체 보고
Code
LiveCodeBench
66.3%자체 보고
General
IFEval
89.5%자체 보고
BFCL v2
74.1%자체 보고
Math
MATH-500
97.0%자체 보고
AIME 2025
72.5%자체 보고
AA 평가 지수
Math Index63.7
Intelligence Index15.0
Coding Index13.1
Math 5001.0
Mmlu Pro0.8
Aime0.7
Gpqa0.7
Livecodebench0.6
Aime 250.6
Ifbench0.4
Scicode0.3
Tau20.1
Hle0.1
Lcr0.1
Terminalbench Hard0.0
LLM Stats 카테고리 점수
Structured Output90
Instruction Following90
Biology80
Chemistry80
General80
Math80
Physics80
Reasoning80
Tool Calling70
Code70
가격
입력 가격$0.6 / 1M tokens
출력 가격$1.8 / 1M tokens
혼합 가격 (3:1)$0.9 / 1M tokens
속도
토큰/초40.9 tokens/s
첫 토큰 지연0.75s
첫 응답 지연49.64s
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다