Llama 3.1 Nemotron Instruct 70B
NVIDIALlamaОткрытые весаLlama 3.1 Community License
Описание
A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.
Дата выхода
2024-10-15
Параметры
70.0B
Длина контекста
128K
Модальности
text
Радар способностей
70
general
0
coding
90
reasoning
60
scienceоцен.
63
agents
0
multimodal
При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.
Рейтинги
Нет данных рейтинга
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Chat
MT-Bench
0.09 / 100Сам.
General
MMLU
80.2%Сам.
Instruct HumanEval
73.8%Сам.
TruthfulQA
58.6%Сам.
Language
MMLU Chat
80.6%Сам.
Math
GSM8k
91.4%Сам.
GSM8K Chat
81.9%Сам.
Reasoning
HellaSwagAI2 (2019)
85.6%Сам.
Winogrande
84.5%Сам.
ARC-C
69.2%Сам.
Summarization
XLSum English
31.6%Сам.
Индексы оценки AA
(Artificial Analysis)Нет данных AA оценки
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Math90
Language80
Legal70
Reasoning70
Finance70
General70
Healthcare70
Chat10
Roleplay10
Communication10
Creativity10
Цены
Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно
Скорость
Нет данных о скорости
Рейтинг цен провайдеров
Нет данных провайдеров