Phi-3.5-mini-instruct
MicrosoftPhiОткрытые весаMIT · Коммерческое использование
Описание
Phi-3.5-mini-instruct is a 3.8B-parameter model that supports up to 128K context tokens, with improved multilingual capabilities across over 20 languages. It underwent additional training and safety post-training to enhance instruction-following, reasoning, math, and code generation. Ideal for environments with memory or latency constraints, it uses an MIT license.
Дата выхода
2024-08-23
Параметры
3.8B
Длина контекста
128K
Модальности
text
Радар способностей
60
general
60
coding
60
reasoning
26
scienceоцен.
60
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рассуждения | 55 | 69.0 | LS |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
30.4%Сам.
Code
RepoQA
77.0%Сам.
HumanEval
62.8%Сам.
Creativity
Social IQa
74.7%Сам.
Arena Hard
37.0%Сам.
Finance
MMLU
69.0%Сам.
TruthfulQA
64.0%Сам.
MMLU-Pro
47.4%Сам.
General
ARC-C
84.6%Сам.
PIQA
81.0%Сам.
OpenBookQA
79.2%Сам.
MBPP
0.70 / 100Сам.
MMMLU
55.4%Сам.
Language
BoolQ
78.0%Сам.
MEGA XStoryCloze
73.5%Сам.
BIG-Bench Hard
69.0%Сам.
Winogrande
68.5%Сам.
MEGA XCOPA
63.1%Сам.
MEGA TyDi QA
62.2%Сам.
MEGA MLQA
61.7%Сам.
MEGA UDPOS
46.5%Сам.
SQuALITY
24.3%Сам.
Long Context
RULER
84.1%Сам.
Qasper
41.9%Сам.
GovReport
25.9%Сам.
QMSum
21.3%Сам.
SummScreenFD
16.0%Сам.
Math
GSM8k
86.2%Сам.
MATH
48.5%Сам.
MGSM
47.9%Сам.
Reasoning
HellaSwag
69.4%Сам.
Индексы оценки AA
Нет данных AA оценки
Оценки категорий LLM Stats
Psychology70
Reasoning70
Language60
Legal60
Math60
Physics60
Finance60
General60
Healthcare60
Code60
Creativity60
Long Context50
Writing40
Biology30
Chemistry30
Summarization20
Цены
Цена ввода$0.08 / 1M токенов
Цена вывода$0.35 / 1M токенов
Смешанная цена (3:1)$0.1475 / 1M токенов
Цена чтения кэша$0.08 / 1M токенов
Скорость
Нет данных о скорости
Рейтинг цен провайдеров
Рейтинг цен провайдеров
5 провайдеров
Самый дешевый: MicrosoftСамый дорогой: Azure
ПровайдерВводВывод
1MicrosoftОсновной
$0.08
$0.35
2OpenRouter
$0.08
$0.35
3Kilo Gateway
$0.08
$0.35
4Azure Cognitive Services
$0.13
$0.52
5Azure
$0.13
$0.52
Сравнение цен разных API-провайдеров для этой модели.