Llama 3.1 Instruct 70B
MetaLlamaОткрытые весаLlama 3.1 Community License
Описание
Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.
Дата выхода
2024-07-23
Параметры
70.0B
Длина контекста
131K
Модальности
text
Радар способностей
25
general
24
coding
20
reasoning
29
science
70
agents
0
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 484 | 13.0 | AA |
| Общий рейтинг | 451 | 28.0 | AA |
| Наука | 443 | 29.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
41.7%Сам.
Code
HumanEvalOpenAI (2021)
80.5%Сам.
Gorilla Benchmark API Bench
29.7%Сам.
Finance
MMLU (CoT)
86.0%Сам.
MMLU
83.6%Сам.
MMLU-Pro
66.4%Сам.
General
ARC-C
94.8%Сам.
IFEvalGoogle Research (2023)
87.5%Сам.
MBPP ++ base version
86.0%Сам.
BFCL
84.8%Сам.
Multipl-E HumanEval
65.5%Сам.
Multipl-E MBPP
62.0%Сам.
Nexus
56.7%Сам.
Math
GSM-8K (CoT)
95.1%Сам.
Multilingual MGSM (CoT)
86.9%Сам.
DROP
79.6%Сам.
MATH (CoT)
68.0%Сам.
Reasoning
API-Bank
90.0%Сам.
Индексы оценки AA
(Artificial Analysis)Intelligence Index(Artificial Analysis)6.5
Math Index(Artificial Analysis)4.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.6
Gpqa(NYU + Cohere + Anthropic (2023))0.4
Ifbench(Google Research (2023))0.3
Scicode(UIUC + Argonne National Lab (2024))0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.2
Aime(MAA (Mathematical Association of America))0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))0.2
Lcr(Artificial Analysis)0.1
Hle(Center for AI Safety + Scale AI (2025))0.0
Aime 25(MAA (Mathematical Association of America))0.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Structured Output90
Instruction Following90
Legal80
Math80
Language80
Finance80
Healthcare80
Reasoning70
General70
Tool Calling70
Code60
Physics40
Biology40
Chemistry40
Цены
Цена ввода$0.56 / 1M токенов
Цена вывода$0.56 / 1M токенов
Смешанная цена (3:1)$0.56 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
3 провайдеров
Самый дешевый: OpenRouterСамый дорогой: Meta
ПровайдерВводВывод
1OpenRouterСамый дешевый
$0.4
$0.4
2Kilo Gateway
$0.4
$0.4
3MetaОсновной
$0.56
$0.56
Сравнение цен разных API-провайдеров для этой модели.