Saltar al contenido principal

Phi-3.5-mini-instruct

MicrosoftPhiOpen WeightMIT · Uso Comercial

Descripción

Phi-3.5-mini-instruct is a 3.8B-parameter model that supports up to 128K context tokens, with improved multilingual capabilities across over 20 languages. It underwent additional training and safety post-training to enhance instruction-following, reasoning, math, and code generation. Ideal for environments with memory or latency constraints, it uses an MIT license.

Fecha de lanzamiento
2024-08-23
Parámetros
3.8B
Longitud del contexto
128K
Modalidades
text

Radar de capacidades

60
general
60
coding
60
reasoning
26
scienceest.
60
agents
0
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Razonamiento55
69.0
LS

Puntuaciones de benchmarks (LLM Stats)

Biology

GPQA30.4%Aut.

Code

RepoQA77.0%Aut.
HumanEval62.8%Aut.

Creativity

Social IQa74.7%Aut.
Arena Hard37.0%Aut.

Finance

MMLU69.0%Aut.
TruthfulQA64.0%Aut.
MMLU-Pro47.4%Aut.

General

ARC-C84.6%Aut.
PIQA81.0%Aut.
OpenBookQA79.2%Aut.
MBPP0.70 / 100Aut.
MMMLU55.4%Aut.

Language

BoolQ78.0%Aut.
MEGA XStoryCloze73.5%Aut.
BIG-Bench Hard69.0%Aut.
Winogrande68.5%Aut.
MEGA XCOPA63.1%Aut.
MEGA TyDi QA62.2%Aut.
MEGA MLQA61.7%Aut.
MEGA UDPOS46.5%Aut.
SQuALITY24.3%Aut.

Long Context

RULER84.1%Aut.
Qasper41.9%Aut.
GovReport25.9%Aut.
QMSum21.3%Aut.
SummScreenFD16.0%Aut.

Math

GSM8k86.2%Aut.
MATH48.5%Aut.
MGSM47.9%Aut.

Reasoning

HellaSwag69.4%Aut.

Índices de evaluación AA

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

Psychology
70
Reasoning
70
Language
60
Legal
60
Math
60
Physics
60
Finance
60
General
60
Healthcare
60
Code
60
Creativity
60
Long Context
50
Writing
40
Biology
30
Chemistry
30
Summarization
20

Precios

Precio de entrada$0.08 / 1M tokens
Precio de salida$0.35 / 1M tokens
Precio mixto (3:1)$0.1475 / 1M tokens
Precio de lectura caché$0.08 / 1M tokens

Velocidad

No hay datos de velocidad disponibles

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

5 proveedores

Más barato: MicrosoftMás caro: Azure
ProveedorEntradaSalida
1MicrosoftPRINCIPAL
$0.08
$0.35
2OpenRouter
$0.08
$0.35
3Kilo Gateway
$0.08
$0.35
4Azure Cognitive Services
$0.13
$0.52
5Azure
$0.13
$0.52

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas