Claude 3 Haiku
AnthropicClaudeProprietary
Описание
Claude 3 Haiku is the fastest and most compact model in the Claude 3 family, designed for near-instant responsiveness. It excels at answering simple queries and requests with unmatched speed, making it ideal for seamless AI experiences that mimic human interactions.
Дата выхода
2024-03-04
Параметры
—
Длина контекста
200K
Модальности
image, text
Радар способностей
11
general
11
coding
20
reasoning
24
scienceоцен.
0
agents
80
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 396 | 14.0 | AA |
| General Ranking | 433 | 21.0 | AA |
| Math Reasoning | 308 | 19.0 | AA |
| Reasoning | 19 | 86.0 | LS |
| Science | 395 | 24.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
33.3%Сам.
Code
HumanEval
75.9%Сам.
Finance
MMLU
75.2%Сам.
General
ARC-C
89.2%Сам.
Language
BIG-Bench Hard
73.7%Сам.
Math
GSM8k
88.9%Сам.
DROP
78.4%Сам.
MGSM
75.1%Сам.
MATH
38.9%Сам.
Reasoning
HellaSwag
85.9%Сам.
Индексы оценки AA
Intelligence Index12.3
Coding Index6.7
Math 5000.4
Gpqa0.4
Ifbench0.4
Tau20.2
Lcr0.2
Scicode0.2
Livecodebench0.2
Hle0.0
Aime0.0
Terminalbench Hard0.0
Оценки категорий LLM Stats
Code80
Finance80
Healthcare80
Legal80
General70
Language70
Math70
Reasoning70
Biology30
Chemistry30
Physics30
Цены
Цена ввода$0.25 / 1M tokens
Цена вывода$1.25 / 1M tokens
Смешанная цена (3:1)$0.5 / 1M tokens
Скорость
Токенов/сек0.0 tokens/s
Задержка первого токена0.00s
Время до первого ответа0.00s
Доступные провайдеры
(Внутренние единицы LS)Нет данных провайдеров