मुख्य सामग्री पर जाएं
AITier

Llama 3.1 Nemotron Instruct 70B

NVIDIALlamaOpen WeightLlama 3.1 Community License

विवरण

A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.

रिलीज़ तिथि
2024-10-15
पैरामीटर
70.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
text

क्षमता रडार

29
general
14
coding
27
reasoning
30
scienceअनुमानित
0
agents
0
multimodal

समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।

रैंकिंग

डोमेन#रैंकस्कोरस्रोत
Code Ranking391
14.0
AA
General Ranking355
31.0
AA
Math Reasoning282
26.0
AA
Reasoning18
86.0
LS
Science346
31.0
AA

बेंचमार्क स्कोर (LLM Stats)

Communication

MT-Bench0.09 / 100स्वयं

Finance

MMLU Chat80.6%स्वयं
MMLU80.2%स्वयं
TruthfulQA58.6%स्वयं

General

Instruct HumanEval73.8%स्वयं
ARC-C69.2%स्वयं

Language

Winogrande84.5%स्वयं
XLSum English31.6%स्वयं

Math

GSM8k91.4%स्वयं
GSM8K Chat81.9%स्वयं

Reasoning

HellaSwag85.6%स्वयं

AA मूल्यांकन सूचकांक

Intelligence Index
13.4
Math Index
11.0
Coding Index
10.8
Math 500
0.7
Mmlu Pro
0.7
Gpqa
0.5
Ifbench
0.3
Aime
0.2
Scicode
0.2
Tau2
0.2
Livecodebench
0.2
Aime 25
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Stats श्रेणी स्कोर

Math
90
Language
80
Finance
70
Healthcare
70
Legal
70
Reasoning
70
General
50
Communication
10
Creativity
10
Roleplay
10

मूल्य निर्धारण

इनपुट मूल्य$1.2 / 1M tokens
आउटपुट मूल्य$1.2 / 1M tokens
मिश्रित मूल्य (3:1)$1.2 / 1M tokens

गति

टोकन/सेकंड38.1 tokens/s
पहले टोकन में देरी0.34s
पहले उत्तर में देरी0.34s

उपलब्ध प्रदाता

(LS आंतरिक इकाइयाँ)

कोई प्रदाता डेटा उपलब्ध नहीं

बाहरी लिंक

LLM Stats