Phi-4 Mini Instruct
MicrosoftPhiOpen WeightMIT · Commercial OK
विवरण
Phi 4 Mini Instruct is a lightweight (3.8B parameters) open model built upon synthetic data and filtered web data, focusing on high-quality reasoning. It supports a 128K token context length and is enhanced for instruction adherence and safety via supervised fine-tuning and direct preference optimization.
रिलीज़ तिथि
2024-02-26
पैरामीटर
3.8B
संदर्भ लंबाई
128K
मोडैलिटीज़
text
क्षमता रडार
19
general
7
coding
18
reasoning
20
scienceअनुमानित
0
agents
0
multimodal
समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| Code Ranking | 427 | 9.0 | AA |
| General Ranking | 452 | 17.0 | AA |
| Math Reasoning | 310 | 18.0 | AA |
| Reasoning | 50 | 69.0 | LS |
| Science | 425 | 18.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
Biology
GPQA
25.2%स्वयं
Creativity
Social IQa
72.5%स्वयं
Arena Hard
32.8%स्वयं
Finance
MMLU
67.3%स्वयं
TruthfulQA
66.4%स्वयं
MMLU-Pro
52.8%स्वयं
General
ARC-C
83.7%स्वयं
OpenBookQA
79.2%स्वयं
PIQA
77.6%स्वयं
Multilingual MMLU
49.3%स्वयं
Language
BoolQ
81.2%स्वयं
BIG-Bench Hard
70.4%स्वयं
Winogrande
67.0%स्वयं
Math
GSM8k
88.6%स्वयं
MATH
64.0%स्वयं
MGSM
63.9%स्वयं
Reasoning
HellaSwag
69.1%स्वयं
AA मूल्यांकन सूचकांक
Intelligence Index8.4
Math Index6.7
Coding Index3.6
Math 5000.7
Mmlu Pro0.5
Gpqa0.3
Ifbench0.2
Lcr0.1
Livecodebench0.1
Scicode0.1
Tau20.1
Aime 250.1
Hle0.0
Aime0.0
Terminalbench Hard0.0
LLM Stats श्रेणी स्कोर
Math70
Psychology70
Reasoning70
Finance60
General60
Healthcare60
Language60
Legal60
Creativity50
Physics50
Writing30
Biology30
Chemistry30
मूल्य निर्धारण
इनपुट मूल्यमुफ्त
आउटपुट मूल्यमुफ्त
मिश्रित मूल्य (3:1)मुफ्त
गति
टोकन/सेकंड44.6 tokens/s
पहले टोकन में देरी0.33s
पहले उत्तर में देरी0.33s
उपलब्ध प्रदाता
(LS आंतरिक इकाइयाँ)कोई प्रदाता डेटा उपलब्ध नहीं