Saltar al contenido principal

Claude 3.5 Sonnet (Oct '24)

AnthropicClaude

Descripción

Claude 3.5 Sonnet is a powerful AI model. It excels in graduate-level reasoning, undergraduate-level knowledge, and coding proficiency, with improved understanding of nuance, humor, and complex instructions.

Fecha de lanzamiento
2024-10-22
Parámetros
Longitud del contexto
200K
Modalidades
image, pdf, text

Radar de capacidades

29
general
34
coding
43
reasoning
41
scienceest.
60
agents
100
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación240
40.0
AA
Ranking general284
38.0
AA
Razonamiento matemático197
46.0
AA
Ciencia270
42.0
AA

Puntuaciones de benchmarks (LLM Stats)

Biology

GPQA59.4%Aut.

Code

HumanEval92.0%Aut.

Finance

MMLU90.4%Aut.
MMLU-Pro76.1%Aut.

Language

BIG-Bench Hard93.1%Aut.

Math

GSM8k96.4%Aut.
MGSM91.6%Aut.
DROP87.1%Aut.
MATH71.1%Aut.

Índices de evaluación AA

Coding Index
30.2
Intelligence Index
9.9
Mmlu Pro
0.8
Math 500
0.8
Gpqa
0.6
Livecodebench
0.4
Scicode
0.4
Aime
0.2
Hle
0.0

Puntuaciones por categoría LLM Stats

Language
90
Math
90
Code
90
Legal
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Physics
60
Biology
60
Chemistry
60

Precios

Precio de entrada$3 / 1M tokens
Precio de salida$15 / 1M tokens
Precio mixto (3:1)$6 / 1M tokens
Precio de lectura caché$0.3 / 1M tokens
Precio de escritura caché$3.75 / 1M tokens

Velocidad

Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

5 proveedores

Más barato: AnthropicMás caro: DigitalOcean
ProveedorEntradaSalida
1AnthropicPRINCIPAL
$3
$15
2SAP AI Core
$3
$15
3Cloudflare AI Gateway
$3
$15
4Helicone
$3
$15
5DigitalOcean
$3
$15

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas