Перейти к основному содержанию

Llama 3.3 Instruct 70B

MetaLlamaOpen WeightLlama 3.3 Community License Agreement

Описание

Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.

Дата выхода
2024-12-06
Параметры
70.0B
Длина контекста
131K
Модальности
text

Радар способностей

30
general
19
coding
28
reasoning
32
scienceоцен.
80
agents
0
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Домен#МестоОценкаИсточник
Code Ranking357
18.0
AA
General Ranking280
38.0
AA
Math Reasoning280
26.0
AA
Science334
32.0
AA

Оценки бенчмарков (LLM Stats)

Biology

GPQA50.5%Сам.

Code

HumanEval88.4%Сам.

Finance

MMLU86.0%Сам.
MMLU-Pro68.9%Сам.

General

IFEval92.1%Сам.
MBPP EvalPlus87.6%Сам.
BFCL v277.3%Сам.

Math

MGSM91.1%Сам.
MATH77.0%Сам.

Индексы оценки AA

Intelligence Index
14.5
Coding Index
10.7
Math Index
7.7
Math 500
0.8
Mmlu Pro
0.7
Gpqa
0.5
Ifbench
0.5
Aime
0.3
Livecodebench
0.3
Tau2
0.3
Scicode
0.3
Lcr
0.1
Aime 25
0.1
Hle
0.0
Terminalbench Hard
0.0

Оценки категорий LLM Stats

Structured Output
90
Code
90
Instruction Following
90
Tool Calling
80
Finance
80
Healthcare
80
Language
80
Legal
80
Math
80
Reasoning
80
General
70
Biology
50
Chemistry
50
Physics
50

Цены

Цена ввода$0.585 / 1M tokens
Цена вывода$0.71 / 1M tokens
Смешанная цена (3:1)$0.616 / 1M tokens

Скорость

Токенов/сек92.9 tokens/s
Задержка первого токена0.57s
Время до первого ответа0.57s

Доступные провайдеры

(Внутренние единицы LS)

Нет данных провайдеров

Внешние ссылки