Phi-4

MicrosoftPhiOpen WeightMIT · Commercial OK

Description

phi-4 is a state-of-the-art open model built to excel at advanced reasoning, coding, and knowledge tasks. It leverages a blend of synthetic data, filtered web data, academic texts, and supervised fine-tuning for precision, alignment, and safety.

Date de sortie

2024-12-12

Paramètres

14.7B

Longueur du contexte

16K

Modalités

text

Radar de capacités

general

coding

reasoning

scienceest.

agents

multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine	#Rang	Score	Source
Code Ranking	390	14.0	AA
General Ranking	415	23.0	AA
Math Reasoning	267	30.0	AA
Reasoning	25	83.0	LS
Science	295	36.0	AA

Scores de benchmarks (LLM Stats)

Biology

GPQA

56.1%Aut.

Code

HumanEval

82.6%Aut.

Creativity

Arena Hard

75.4%Aut.

Factuality

SimpleQA

3.0%Aut.

Finance

MMLU

84.8%Aut.

MMLU-Pro

70.4%Aut.

General

IFEval

63.0%Aut.

PhiBench

56.2%Aut.

LiveBench

47.6%Aut.

Math

MGSM

80.6%Aut.

MATH

80.4%Aut.

DROP

75.5%Aut.

Reasoning

HumanEval+

82.8%Aut.

Indices d'évaluation AA

Math Index

18.0

Coding Index

11.2

Intelligence Index

10.4

Math 500

0.8

Mmlu Pro

0.7

Gpqa

0.6

Scicode

0.3

Ifbench

0.2

Livecodebench

0.2

Aime 25

0.2

Aime

0.1

Hle

0.0

Terminalbench Hard

0.0

Lcr

0.0

Tau2

0.0

Scores par catégorie LLM Stats

Writing

Code

Creativity

Finance

Healthcare

Language

Legal

Math

Reasoning

Structured Output

Biology

Chemistry

General

Instruction Following

Physics

Factuality

Tarification

Prix d'entrée$0.125 / 1M tokens

Prix de sortie$0.5 / 1M tokens

Prix mixte (3:1)$0.219 / 1M tokens

Vitesse

Tokens/sec38.5 tokens/s

Délai du premier token0.51s

Temps de réponse0.51s

Fournisseurs disponibles

(Unités internes LS)

Aucune donnée de fournisseur disponible

Sources externes

LLM Stats