Перейти к основному содержанию

Llama 3.3 Instruct 70B

MetaLlamaОткрытые весаLlama 3.3 Community License Agreement

Описание

Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.

Дата выхода
2024-12-06
Параметры
70.0B
Длина контекста
131K
Модальности
text

Радар способностей

27
general
19
coding
28
reasoning
32
science
80
agents
0
multimodal

Рейтинги

Домен#МестоОценкаИсточник
Рейтинг кодинга449
17.0
AA
Общий рейтинг356
36.0
AA
Наука413
32.0
AA

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)50.5%Сам.

Code

HumanEvalOpenAI (2021)88.4%Сам.

Finance

MMLU86.0%Сам.
MMLU-Pro68.9%Сам.

General

IFEvalGoogle Research (2023)92.1%Сам.
MBPP EvalPlus87.6%Сам.
BFCL v277.3%Сам.

Math

MGSM91.1%Сам.
MATH77.0%Сам.

Индексы оценки AA

(Artificial Analysis)
Coding Index(Artificial Analysis)
11.9
Intelligence Index(Artificial Analysis)
9.3
Math Index(Artificial Analysis)
7.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.7
Gpqa(NYU + Cohere + Anthropic (2023))
0.5
Ifbench(Google Research (2023))
0.5
Aime(MAA (Mathematical Association of America))
0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.3
Scicode(UIUC + Argonne National Lab (2024))
0.3
Lcr(Artificial Analysis)
0.2
Aime 25(MAA (Mathematical Association of America))
0.1
Terminalbench V2 1
0.0
Hle(Center for AI Safety + Scale AI (2025))
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Structured Output
90
Instruction Following
90
Code
90
Legal
80
Math
80
Reasoning
80
Language
80
Finance
80
General
80
Healthcare
80
Tool Calling
80
Physics
50
Biology
50
Chemistry
50

Цены

Цена ввода$0.655 / 1M токенов
Цена вывода$0.72 / 1M токенов
Смешанная цена (3:1)$0.671 / 1M токенов

Скорость

Токенов/сек80.9
Задержка первого токена0.67s
Время до первого ответа0.67s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

5 провайдеров

Самый дешевый: NanoGPTСамый дорогой: Meta
ПровайдерВводВывод
1NanoGPTСамый дешевый
$0.05
$0.23
2OpenRouter
$0.1
$0.32
3Kilo Gateway
$0.1
$0.32
4NovitaAI
$0.135
$0.4
5MetaОсновной
$0.655
$0.72

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки