Llama 3.1 Instruct 8B
MetaLlamaОткрытые весаLlama 3.1 Community License
Описание
Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.
Дата выхода
2024-07-23
Параметры
8.0B
Длина контекста
131K
Модальности
text
Радар способностей
60
general
40
coding
60
reasoning
26
scienceоцен.
50
agents
0
multimodal
При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.
Рейтинги
Нет данных рейтинга
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
80.4%Сам.
General
BFCL
76.1%Сам.
MMLU
69.4%Сам.
Multipl-E MBPP
52.4%Сам.
Nexus
38.5%Сам.
Language
MMLU (CoT)
73.0%Сам.
Multipl-E HumanEval
50.8%Сам.
MMLU-Pro
48.3%Сам.
Math
GSM-8K (CoT)
84.5%Сам.
Multilingual MGSM (CoT)
68.9%Сам.
MATH (CoT)
51.9%Сам.
Reasoning
ARC-C
83.4%Сам.
API-Bank
82.6%Сам.
MBPP EvalPlus (base)
72.8%Сам.
HumanEvalOpenAI (2021)
72.6%Сам.
DROP
59.5%Сам.
GPQANYU + Cohere + Anthropic (2023)
30.4%Сам.
Gorilla Benchmark API Bench
8.2%Сам.
Индексы оценки AA
(Artificial Analysis)Нет данных AA оценки
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Chat80
Instruction Following80
Structured Output80
Language60
Legal60
Math60
Reasoning60
Finance60
General60
Healthcare60
Tool Calling50
Code40
Physics30
Biology30
Chemistry30
Цены
Цена ввода$0.035 / 1M токенов
Цена вывода$0.065 / 1M токенов
Смешанная цена (3:1)$0.025 / 1M токенов
Скорость
Токенов/сек141.3
Задержка первого токена0.87s
Время до первого ответа0.87s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
2 провайдеров
Самый дешевый: DeepInfraСамый дорогой: Meta
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0.02
$0.04
2MetaОсновной
$0.035
$0.065
Сравнение цен разных API-провайдеров для этой модели.