Перейти к основному содержанию

Llama 3.1 Nemotron Instruct 70B

NVIDIALlamaОткрытые весаLlama 3.1 Community License

Описание

A large language model customized by NVIDIA to improve the helpfulness of LLM generated responses. It is a fine-tuned version of Llama 3.1 70B Instruct. The model was trained using RLHF (REINFORCE) with HelpSteer2-Preference prompts.

Дата выхода
2024-10-15
Параметры
70.0B
Длина контекста
128K
Модальности
text

Радар способностей

70
general
0
coding
90
reasoning
60
scienceоцен.
63
agents
0
multimodal

При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.

Рейтинги

Нет данных рейтинга

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Chat

MT-Bench0.09 / 100Сам.

General

MMLU80.2%Сам.
Instruct HumanEval73.8%Сам.
TruthfulQA58.6%Сам.

Language

MMLU Chat80.6%Сам.

Math

GSM8k91.4%Сам.
GSM8K Chat81.9%Сам.

Reasoning

HellaSwagAI2 (2019)85.6%Сам.
Winogrande84.5%Сам.
ARC-C69.2%Сам.

Summarization

XLSum English31.6%Сам.

Индексы оценки AA

(Artificial Analysis)

Нет данных AA оценки

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Math
90
Language
80
Legal
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Chat
10
Roleplay
10
Communication
10
Creativity
10

Цены

Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно

Скорость

Нет данных о скорости

Рейтинг цен провайдеров

Нет данных провайдеров

Внешние ссылки