Llama 3.3 Instruct 70B
MetaLlamaОткрытые весаLlama 3.3 Community License Agreement
Описание
Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.
Дата выхода
2024-12-06
Параметры
70.0B
Длина контекста
131K
Модальности
text
Радар способностей
27
general
19
coding
28
reasoning
32
science
80
agents
0
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 449 | 17.0 | AA |
| Общий рейтинг | 356 | 36.0 | AA |
| Наука | 413 | 32.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
50.5%Сам.
Code
HumanEvalOpenAI (2021)
88.4%Сам.
Finance
MMLU
86.0%Сам.
MMLU-Pro
68.9%Сам.
General
IFEvalGoogle Research (2023)
92.1%Сам.
MBPP EvalPlus
87.6%Сам.
BFCL v2
77.3%Сам.
Math
MGSM
91.1%Сам.
MATH
77.0%Сам.
Индексы оценки AA
(Artificial Analysis)Coding Index(Artificial Analysis)11.9
Intelligence Index(Artificial Analysis)9.3
Math Index(Artificial Analysis)7.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.5
Ifbench(Google Research (2023))0.5
Aime(MAA (Mathematical Association of America))0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))0.3
Scicode(UIUC + Argonne National Lab (2024))0.3
Lcr(Artificial Analysis)0.2
Aime 25(MAA (Mathematical Association of America))0.1
Terminalbench V2 10.0
Hle(Center for AI Safety + Scale AI (2025))0.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Structured Output90
Instruction Following90
Code90
Legal80
Math80
Reasoning80
Language80
Finance80
General80
Healthcare80
Tool Calling80
Physics50
Biology50
Chemistry50
Цены
Цена ввода$0.655 / 1M токенов
Цена вывода$0.72 / 1M токенов
Смешанная цена (3:1)$0.671 / 1M токенов
Скорость
Токенов/сек80.9
Задержка первого токена0.67s
Время до первого ответа0.67s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
5 провайдеров
Самый дешевый: NanoGPTСамый дорогой: Meta
ПровайдерВводВывод
1NanoGPTСамый дешевый
$0.05
$0.23
2OpenRouter
$0.1
$0.32
3Kilo Gateway
$0.1
$0.32
4NovitaAI
$0.135
$0.4
5MetaОсновной
$0.655
$0.72
Сравнение цен разных API-провайдеров для этой модели.