メインコンテンツへスキップ
AITier

Llama 3.1 Nemotron Instruct 70B

NVIDIALlamaオープンウエイトLlama 3.1 Community License

説明

A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.

リリース日
2024-10-15
パラメータ
70.0B
コンテキスト長
128K
モダリティ
text

能力レーダー

25
general
18
coding
27
reasoning
30
science
24
agents
0
multimodal

ランキング

ドメイン#順位スコアソース
コーディングランキング489
11.0
AA
総合ランキング423
29.0
AA
科学430
29.0
AA

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Communication

MT-Bench0.09 / 100自己申告

Finance

MMLU Chat80.6%自己申告
MMLU80.2%自己申告
TruthfulQA58.6%自己申告

General

Instruct HumanEval73.8%自己申告
ARC-C69.2%自己申告

Language

Winogrande84.5%自己申告
XLSum English31.6%自己申告

Math

GSM8k91.4%自己申告
GSM8K Chat81.9%自己申告

Reasoning

HellaSwagAI2 (2019)85.6%自己申告

AA評価指数

(Artificial Analysis)
Math Index(Artificial Analysis)
11.0
Intelligence Index(Artificial Analysis)
7.4
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.7
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.7
Gpqa(NYU + Cohere + Anthropic (2023))
0.5
Ifbench(Google Research (2023))
0.3
Aime(MAA (Mathematical Association of America))
0.2
Scicode(UIUC + Argonne National Lab (2024))
0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.2
Aime 25(MAA (Mathematical Association of America))
0.1
Lcr(Artificial Analysis)
0.1
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0
Hle(Center for AI Safety + Scale AI (2025))
0.0

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Math
90
Language
80
Legal
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Roleplay
10
Communication
10
Creativity
10

価格設定

入力価格$1.2 / 1Mトークン
出力価格$1.2 / 1Mトークン
混合価格（3:1）$1.2 / 1Mトークン

速度

トークン/秒80.2
初トークン遅延4.82s
初回答遅延4.82s

プロバイダー価格ランキング

プロバイダー価格ランキング

1 プロバイダー

プロバイダー入力出力
1NVIDIAプライマリ
$1.2
$1.2

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク

LLM StatsArtificial Analysis