Saltar al contenido principal

o1-preview

OpenAIOpenAI o-seriesProprietary

Descripción

A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.

Fecha de lanzamiento
2024-09-12
Parámetros
—
Longitud del contexto
200K
Modalidades
image, pdf, text

Radar de capacidades

37
general
34
coding
82
reasoning
77
science
68
agents
80
multimodal

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación355
42.0
AA
Ranking general330
41.0
AA
Ciencia83
77.0
AA

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Factuality

SimpleQA42.4%Aut.

General

MMLU90.8%Aut.

Math

MGSM90.8%Aut.
MATH85.5%Aut.
LiveBench52.3%Aut.
AIME 202442.0%Aut.

Reasoning

GPQANYU + Cohere + Anthropic (2023)73.3%Aut.
SWE-Bench Verified41.3%Aut.

Índices de evaluación AA

(Artificial Analysis)
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
92.4
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
84.8
Math Index(Artificial Analysis)
79.7
Aime 25(MAA (Mathematical Association of America))
79.7
Gpqa(NYU + Cohere + Anthropic (2023))
76.5
Coding Index(Artificial Analysis)
34.0
Intelligence Index(Artificial Analysis)
11.4

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Language
90
Legal
90
Finance
90
Healthcare
90
Math
70
Physics
70
Biology
70
Chemistry
70
Reasoning
60
General
60
Factuality
40
Frontend Development
40
Code
40

Precios

Precio de entrada$16.5 / 1M tokens
Precio de salida$66 / 1M tokens
Precio mixto (3:1)$28.875 / 1M tokens
Precio de lectura caché$7.5 / 1M tokens

Velocidad

Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

1 proveedores

ProveedorEntradaSalida
1OpenAIPRINCIPAL
$16.5
$66

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas