Passer au contenu principal

Claude 3.5 Haiku

AnthropicClaudeProprietary

Description

Claude 3.5 Haiku is Anthropic's fastest model, delivering advanced coding, tool use, and reasoning capabilities at an accessible price. It excels at user-facing products, specialized sub-agent tasks, and generating personalized experiences from large data volumes. The model is particularly well-suited for code completions, interactive chatbots, data extraction, and real-time content moderation.

Date de sortie
2024-10-22
Paramètres
Longueur du contexte
Modalités
text

Radar de capacités

26
general
22
coding
31
reasoning
29
science
40
agents
0
multimodal

Classements

Domaine#RangScoreSource
Classement codage414
21.0
AA
Classement général371
35.0
AA
Science445
29.0
AA

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)41.6%Aut.

Code

HumanEvalOpenAI (2021)88.1%Aut.
SWE-Bench Verified40.6%Aut.

Communication

TAU-bench Retail51.0%Aut.
TAU-bench Airline22.8%Aut.

Finance

MMLU-Pro65.0%Aut.

Math

MGSM85.6%Aut.
DROP83.1%Aut.
MATH69.4%Aut.

Indices d'évaluation AA

(Artificial Analysis)
Coding Index(Artificial Analysis)
15.9
Intelligence Index(Artificial Analysis)
12.2
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.7
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.6
Ifbench(Google Research (2023))
0.4
Gpqa(NYU + Cohere + Anthropic (2023))
0.4
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.3
Scicode(UIUC + Argonne National Lab (2024))
0.3
Lcr(Artificial Analysis)
0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.2
Terminalbench V2 1
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.0
Aime(MAA (Mathematical Association of America))
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Math
80
Legal
70
Language
70
Finance
70
Healthcare
70
Reasoning
60
General
60
Code
60
Physics
40
Frontend Development
40
Biology
40
Chemistry
40
Communication
40
Tool Calling
40

Tarification

Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)Gratuit

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

1 fournisseurs

FournisseurEntréeSortie
1OpenCode Zen
$0.8
$4

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes