Phi-4
MicrosoftPhiOpen WeightMIT · Commercial OK
Описание
phi-4 is a state-of-the-art open model built to excel at advanced reasoning, coding, and knowledge tasks. It leverages a blend of synthetic data, filtered web data, academic texts, and supervised fine-tuning for precision, alignment, and safety.
Дата выхода
2024-12-12
Параметры
14.7B
Длина контекста
16K
Модальности
text
Радар способностей
28
general
17
coding
30
reasoning
36
scienceоцен.
0
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 390 | 14.0 | AA |
| General Ranking | 415 | 23.0 | AA |
| Math Reasoning | 267 | 30.0 | AA |
| Reasoning | 25 | 83.0 | LS |
| Science | 295 | 36.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
56.1%Сам.
Code
HumanEval
82.6%Сам.
Creativity
Arena Hard
75.4%Сам.
Factuality
SimpleQA
3.0%Сам.
Finance
MMLU
84.8%Сам.
MMLU-Pro
70.4%Сам.
General
IFEval
63.0%Сам.
PhiBench
56.2%Сам.
LiveBench
47.6%Сам.
Math
MGSM
80.6%Сам.
MATH
80.4%Сам.
DROP
75.5%Сам.
Reasoning
HumanEval+
82.8%Сам.
Индексы оценки AA
Math Index18.0
Coding Index11.2
Intelligence Index10.4
Math 5000.8
Mmlu Pro0.7
Gpqa0.6
Scicode0.3
Ifbench0.2
Livecodebench0.2
Aime 250.2
Aime0.1
Hle0.0
Terminalbench Hard0.0
Lcr0.0
Tau20.0
Оценки категорий LLM Stats
Writing80
Code80
Creativity80
Finance80
Healthcare80
Language80
Legal80
Math70
Reasoning70
Structured Output60
Biology60
Chemistry60
General60
Instruction Following60
Physics60
Factuality0
Цены
Цена ввода$0.125 / 1M tokens
Цена вывода$0.5 / 1M tokens
Смешанная цена (3:1)$0.219 / 1M tokens
Скорость
Токенов/сек38.5 tokens/s
Задержка первого токена0.51s
Время до первого ответа0.51s
Доступные провайдеры
(Внутренние единицы LS)Нет данных провайдеров