Passer au contenu principal

Claude 3.5 Sonnet (June '24)

AnthropicClaude

Description

Claude 3.5 Sonnet is a powerful AI model. It excels in graduate-level reasoning, undergraduate-level knowledge, and coding proficiency, with improved understanding of nuance, humor, and complex instructions.

Date de sortie
2024-06-21
Paramètres
Longueur du contexte
200K
Modalités
image, pdf, text

Radar de capacités

28
general
27
coding
37
reasoning
37
scienceest.
60
agents
100
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage274
33.0
AA
Classement général303
36.0
AA
Raisonnement mathématique229
39.0
AA
Science309
37.0
AA

Scores de benchmarks (LLM Stats)

Biology

GPQA59.4%Aut.

Code

HumanEval92.0%Aut.

Finance

MMLU90.4%Aut.
MMLU-Pro76.1%Aut.

Language

BIG-Bench Hard93.1%Aut.

Math

GSM8k96.4%Aut.
MGSM91.6%Aut.
DROP87.1%Aut.
MATH71.1%Aut.

Indices d'évaluation AA

Coding Index
26.0
Intelligence Index
8.3
Mmlu Pro
0.8
Math 500
0.7
Gpqa
0.6
Scicode
0.3
Aime
0.1
Hle
0.0

Scores par catégorie LLM Stats

Language
90
Math
90
Code
90
Legal
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Physics
60
Biology
60
Chemistry
60

Tarification

Prix d'entrée$3 / 1M tokens
Prix de sortie$15 / 1M tokens
Prix mixte (3:1)$6 / 1M tokens
Prix de lecture cache$0.3 / 1M tokens
Prix d'écriture cache$3.75 / 1M tokens

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

1 fournisseurs

FournisseurEntréeSortie
1AnthropicPRINCIPAL
$3
$15

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes