Перейти к основному содержанию

Mistral Small (Feb '24)

MistralMistral
Дата выхода
2024-02-26
Параметры
Длина контекста
256K
Модальности
image, text

Радар способностей

15
general
12
coding
23
reasoning
19
scienceоцен.
20
agents
60
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Домен#МестоОценкаИсточник
Рейтинг кодинга429
12.0
AA
Общий рейтинг468
17.0
AA
Математическое мышление275
28.0
AA
Наука458
17.0
AA

Оценки бенчмарков (LLM Stats)

Biology

GPQA71.2%Сам.

Code

LiveCodeBench63.6%Сам.

Creativity

Arena Hard58.3%Сам.

Finance

MMLU-Pro78.0%Сам.

General

MMMU-Pro60.0%Сам.
IFBench48.0%Сам.

Language

COLLIE62.9%Сам.

Long Context

AA-LCR71.2%Сам.

Math

AIME 202583.8%Сам.

Индексы оценки AA

Intelligence Index
3.6
Math 500
0.6
Mmlu Pro
0.4
Gpqa
0.3
Scicode
0.1
Livecodebench
0.1
Hle
0.0
Aime
0.0

Оценки категорий LLM Stats

Legal
80
Math
80
Finance
80
Healthcare
80
Language
70
Long Context
70
Physics
70
Reasoning
70
Biology
70
Chemistry
70
Multimodal
60
General
60
Code
60
Creativity
60
Vision
60
Writing
60
Instruction Following
50

Цены

Цена ввода$1 / 1M токенов
Цена вывода$3 / 1M токенов
Смешанная цена (3:1)$1.5 / 1M токенов

Скорость

Токенов/сек156.0
Задержка первого токена0.58s
Время до первого ответа0.58s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

1 провайдеров

ПровайдерВводВывод
1MistralОсновной
$1
$3

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки