Saltar al contenido principal

Mistral Small (Feb '24)

MistralMistral
Fecha de lanzamiento
2024-02-26
Parámetros
Longitud del contexto
256K
Modalidades
image, text

Radar de capacidades

15
general
12
coding
23
reasoning
19
scienceest.
20
agents
60
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación429
12.0
AA
Ranking general468
17.0
AA
Razonamiento matemático275
28.0
AA
Ciencia458
17.0
AA

Puntuaciones de benchmarks (LLM Stats)

Biology

GPQA71.2%Aut.

Code

LiveCodeBench63.6%Aut.

Creativity

Arena Hard58.3%Aut.

Finance

MMLU-Pro78.0%Aut.

General

MMMU-Pro60.0%Aut.
IFBench48.0%Aut.

Language

COLLIE62.9%Aut.

Long Context

AA-LCR71.2%Aut.

Math

AIME 202583.8%Aut.

Índices de evaluación AA

Intelligence Index
3.6
Math 500
0.6
Mmlu Pro
0.4
Gpqa
0.3
Scicode
0.1
Livecodebench
0.1
Hle
0.0
Aime
0.0

Puntuaciones por categoría LLM Stats

Legal
80
Math
80
Finance
80
Healthcare
80
Language
70
Long Context
70
Physics
70
Reasoning
70
Biology
70
Chemistry
70
Multimodal
60
General
60
Code
60
Creativity
60
Vision
60
Writing
60
Instruction Following
50

Precios

Precio de entrada$1 / 1M tokens
Precio de salida$3 / 1M tokens
Precio mixto (3:1)$1.5 / 1M tokens

Velocidad

Tokens/seg156.0
Retraso del primer token0.58s
Tiempo hasta la respuesta0.58s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

1 proveedores

ProveedorEntradaSalida
1MistralPRINCIPAL
$1
$3

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas