Llama 3.1 Instruct 8B
MetaLlamaОткрытые весаLlama 3.1 Community License
Описание
Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.
Дата выхода
2024-07-23
Параметры
8.0B
Длина контекста
131K
Модальности
text
Радар способностей
19
general
8
coding
14
reasoning
17
science
50
agents
0
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 506 | 10.0 | AA |
| Общий рейтинг | 492 | 22.0 | AA |
| Наука | 528 | 16.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
30.4%Сам.
Code
HumanEvalOpenAI (2021)
72.6%Сам.
Gorilla Benchmark API Bench
8.2%Сам.
Finance
MMLU (CoT)
73.0%Сам.
MMLU
69.4%Сам.
MMLU-Pro
48.3%Сам.
General
ARC-C
83.4%Сам.
IFEvalGoogle Research (2023)
80.4%Сам.
BFCL
76.1%Сам.
MBPP EvalPlus (base)
72.8%Сам.
Multipl-E MBPP
52.4%Сам.
Multipl-E HumanEval
50.8%Сам.
Nexus
38.5%Сам.
Math
GSM-8K (CoT)
84.5%Сам.
Multilingual MGSM (CoT)
68.9%Сам.
DROP
59.5%Сам.
MATH (CoT)
51.9%Сам.
Reasoning
API-Bank
82.6%Сам.
Индексы оценки AA
(Artificial Analysis)Intelligence Index(Artificial Analysis)7.4
Coding Index(Artificial Analysis)5.4
Math Index(Artificial Analysis)4.3
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.5
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.5
Ifbench(Google Research (2023))0.3
Gpqa(NYU + Cohere + Anthropic (2023))0.3
Lcr(Artificial Analysis)0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))0.2
Scicode(UIUC + Argonne National Lab (2024))0.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.1
Aime(MAA (Mathematical Association of America))0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Aime 25(MAA (Mathematical Association of America))0.0
Terminalbench V2 10.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Structured Output80
Instruction Following80
Legal60
Math60
Reasoning60
Language60
Finance60
General60
Healthcare60
Tool Calling50
Code40
Physics30
Biology30
Chemistry30
Цены
Цена ввода$0.02 / 1M токенов
Цена вывода$0.05 / 1M токенов
Смешанная цена (3:1)$0.028 / 1M токенов
Цена чтения кэша$0.025 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1MetaОсновной
$0.02
$0.05
Сравнение цен разных API-провайдеров для этой модели.