Claude 3.5 Sonnet (June '24)
AnthropicClaude
Описание
Claude 3.5 Sonnet is a powerful AI model. It excels in graduate-level reasoning, undergraduate-level knowledge, and coding proficiency, with improved understanding of nuance, humor, and complex instructions.
Дата выхода
2024-06-21
Параметры
—
Длина контекста
200K
Модальности
image, pdf, text
Радар способностей
28
general
27
coding
37
reasoning
37
scienceоцен.
60
agents
100
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 274 | 33.0 | AA |
| Общий рейтинг | 303 | 36.0 | AA |
| Математическое мышление | 229 | 39.0 | AA |
| Наука | 309 | 37.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
59.4%Сам.
Code
HumanEval
92.0%Сам.
Finance
MMLU
90.4%Сам.
MMLU-Pro
76.1%Сам.
Language
BIG-Bench Hard
93.1%Сам.
Math
GSM8k
96.4%Сам.
MGSM
91.6%Сам.
DROP
87.1%Сам.
MATH
71.1%Сам.
Индексы оценки AA
Coding Index26.0
Intelligence Index8.3
Mmlu Pro0.8
Math 5000.7
Gpqa0.6
Scicode0.3
Aime0.1
Hle0.0
Оценки категорий LLM Stats
Language90
Math90
Code90
Legal80
Reasoning80
Finance80
General80
Healthcare80
Physics60
Biology60
Chemistry60
Цены
Цена ввода$3 / 1M токенов
Цена вывода$15 / 1M токенов
Смешанная цена (3:1)$6 / 1M токенов
Цена чтения кэша$0.3 / 1M токенов
Цена записи кэша$3.75 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1AnthropicОсновной
$3
$15
Сравнение цен разных API-провайдеров для этой модели.