Перейти к основному содержанию

Llama 3.1 Instruct 8B

MetaLlamaОткрытые весаLlama 3.1 Community License

Описание

Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.

Дата выхода
2024-07-23
Параметры
8.0B
Длина контекста
131K
Модальности
text

Радар способностей

60
general
40
coding
60
reasoning
26
scienceоцен.
50
agents
0
multimodal

При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.

Рейтинги

Нет данных рейтинга

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)80.4%Сам.

General

BFCL76.1%Сам.
MMLU69.4%Сам.
Multipl-E MBPP52.4%Сам.
Nexus38.5%Сам.

Language

MMLU (CoT)73.0%Сам.
Multipl-E HumanEval50.8%Сам.
MMLU-Pro48.3%Сам.

Math

GSM-8K (CoT)84.5%Сам.
Multilingual MGSM (CoT)68.9%Сам.
MATH (CoT)51.9%Сам.

Reasoning

ARC-C83.4%Сам.
API-Bank82.6%Сам.
MBPP EvalPlus (base)72.8%Сам.
HumanEvalOpenAI (2021)72.6%Сам.
DROP59.5%Сам.
GPQANYU + Cohere + Anthropic (2023)30.4%Сам.
Gorilla Benchmark API Bench8.2%Сам.

Индексы оценки AA

(Artificial Analysis)

Нет данных AA оценки

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Chat
80
Instruction Following
80
Structured Output
80
Language
60
Legal
60
Math
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Tool Calling
50
Code
40
Physics
30
Biology
30
Chemistry
30

Цены

Цена ввода$0.035 / 1M токенов
Цена вывода$0.065 / 1M токенов
Смешанная цена (3:1)$0.025 / 1M токенов

Скорость

Токенов/сек141.3
Задержка первого токена0.87s
Время до первого ответа0.87s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

2 провайдеров

Самый дешевый: DeepInfraСамый дорогой: Meta
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0.02
$0.04
2MetaОсновной
$0.035
$0.065

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки