Перейти к основному содержанию
AITier

Llama 3.1 Instruct 70B

MetaLlamaОткрытые весаLlama 3.1 Community License

Описание

Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.

Дата выхода
2024-07-23
Параметры
70.0B
Длина контекста
131K
Модальности
text

Радар способностей

25
general
23
coding
20
reasoning
30
science
70
agents
0
multimodal

Рейтинги

Домен#МестоОценкаИсточник
Рейтинг кодинга549
15.0
AA
Общий рейтинг517
27.0
AA
Наука566
21.0
AA

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)87.5%Сам.

General

BFCL84.8%Сам.
MMLU83.6%Сам.
Multipl-E MBPP62.0%Сам.
Nexus56.7%Сам.

Language

MMLU (CoT)86.0%Сам.
MMLU-Pro66.4%Сам.
Multipl-E HumanEval65.5%Сам.

Math

GSM-8K (CoT)95.1%Сам.
Multilingual MGSM (CoT)86.9%Сам.
MATH (CoT)68.0%Сам.

Reasoning

ARC-C94.8%Сам.
API-Bank90.0%Сам.
MBPP ++ base version86.0%Сам.
HumanEvalOpenAI (2021)80.5%Сам.
DROP79.6%Сам.
GPQANYU + Cohere + Anthropic (2023)41.7%Сам.
Gorilla Benchmark API Bench29.7%Сам.

Индексы оценки AA

(Artificial Analysis)
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
67.6
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
64.9
Gpqa(NYU + Cohere + Anthropic (2023))
40.9
Ifbench(Google Research (2023))
34.4
Livecodebench(UC Berkeley + MIT + Cornell (2024))
23.2
Aime(MAA (Mathematical Association of America))
17.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
15.2
Intelligence Index(Artificial Analysis)
6.6
Hle(Center for AI Safety + Scale AI (2025))
4.5
Math Index(Artificial Analysis)
4.0
Aime 25(MAA (Mathematical Association of America))
4.0
Terminalbench Hard(Stanford × Laude Institute (2026))
3.0

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Language
80
Legal
80
Math
80
Finance
80
Healthcare
80
Reasoning
70
General
70
Tool Calling
70
Code
60
Physics
40
Biology
40
Chemistry
40

Цены

Цена ввода$0.56 / 1M токенов
Цена вывода$0.56 / 1M токенов
Смешанная цена (3:1)$0.56 / 1M токенов

Скорость

Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

4 провайдеров

Самый дешевый: DeepInfraСамый дорогой: Meta
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0
$0
2OpenRouter
$0.4
$0.4
3Kilo Gateway
$0.4
$0.4
4MetaОсновной
$0.56
$0.56

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки

LLM StatsArtificial Analysis