Llama 3.3 Instruct 70B
MetaLlamaOpen WeightLlama 3.3 Community License Agreement
Описание
Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.
Дата выхода
2024-12-06
Параметры
70.0B
Длина контекста
131K
Модальности
text
Радар способностей
30
general
19
coding
28
reasoning
32
scienceоцен.
80
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 357 | 18.0 | AA |
| General Ranking | 280 | 38.0 | AA |
| Math Reasoning | 280 | 26.0 | AA |
| Science | 334 | 32.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
50.5%Сам.
Code
HumanEval
88.4%Сам.
Finance
MMLU
86.0%Сам.
MMLU-Pro
68.9%Сам.
General
IFEval
92.1%Сам.
MBPP EvalPlus
87.6%Сам.
BFCL v2
77.3%Сам.
Math
MGSM
91.1%Сам.
MATH
77.0%Сам.
Индексы оценки AA
Intelligence Index14.5
Coding Index10.7
Math Index7.7
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Ifbench0.5
Aime0.3
Livecodebench0.3
Tau20.3
Scicode0.3
Lcr0.1
Aime 250.1
Hle0.0
Terminalbench Hard0.0
Оценки категорий LLM Stats
Structured Output90
Code90
Instruction Following90
Tool Calling80
Finance80
Healthcare80
Language80
Legal80
Math80
Reasoning80
General70
Biology50
Chemistry50
Physics50
Цены
Цена ввода$0.585 / 1M tokens
Цена вывода$0.71 / 1M tokens
Смешанная цена (3:1)$0.616 / 1M tokens
Скорость
Токенов/сек92.9 tokens/s
Задержка первого токена0.57s
Время до первого ответа0.57s
Доступные провайдеры
(Внутренние единицы LS)Нет данных провайдеров