Passer au contenu principal

Mistral Small (Feb '24)

MistralMistral
Date de sortie
2024-02-26
Paramètres
Longueur du contexte
256K
Modalités
image, text

Radar de capacités

15
general
12
coding
23
reasoning
19
scienceest.
20
agents
60
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage429
12.0
AA
Classement général468
17.0
AA
Raisonnement mathématique275
28.0
AA
Science458
17.0
AA

Scores de benchmarks (LLM Stats)

Biology

GPQA71.2%Aut.

Code

LiveCodeBench63.6%Aut.

Creativity

Arena Hard58.3%Aut.

Finance

MMLU-Pro78.0%Aut.

General

MMMU-Pro60.0%Aut.
IFBench48.0%Aut.

Language

COLLIE62.9%Aut.

Long Context

AA-LCR71.2%Aut.

Math

AIME 202583.8%Aut.

Indices d'évaluation AA

Intelligence Index
3.6
Math 500
0.6
Mmlu Pro
0.4
Gpqa
0.3
Scicode
0.1
Livecodebench
0.1
Hle
0.0
Aime
0.0

Scores par catégorie LLM Stats

Legal
80
Math
80
Finance
80
Healthcare
80
Language
70
Long Context
70
Physics
70
Reasoning
70
Biology
70
Chemistry
70
Multimodal
60
General
60
Code
60
Creativity
60
Vision
60
Writing
60
Instruction Following
50

Tarification

Prix d'entrée$1 / 1M tokens
Prix de sortie$3 / 1M tokens
Prix mixte (3:1)$1.5 / 1M tokens

Vitesse

Tokens/sec156.0
Délai du premier token0.58s
Temps de réponse0.58s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

1 fournisseurs

FournisseurEntréeSortie
1MistralPRINCIPAL
$1
$3

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes