o1-preview
OpenAIOpenAI o-seriesProprietary
Description
A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.
Date de sortie
2024-09-12
Paramètres
—
Longueur du contexte
200K
Modalités
image, pdf, text
Radar de capacités
41
general
34
coding
82
reasoning
77
science
68
agents
80
multimodal
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 276 | 43.0 | AA |
| Classement général | 247 | 49.0 | AA |
| Science | 64 | 78.0 | AA |
Scores de benchmarks (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
73.3%Aut.
Code
SWE-Bench Verified
41.3%Aut.
Factuality
SimpleQA
42.4%Aut.
Finance
MMLU
90.8%Aut.
General
LiveBench
52.3%Aut.
Math
MGSM
90.8%Aut.
MATH
85.5%Aut.
AIME 2024
42.0%Aut.
Indices d'évaluation AA
(Artificial Analysis)Math Index(Artificial Analysis)79.3
Coding Index(Artificial Analysis)34.0
Intelligence Index(Artificial Analysis)17.2
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.9
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime 25(MAA (Mathematical Association of America))0.8
Gpqa(NYU + Cohere + Anthropic (2023))0.8
Scores par catégorie LLM Stats
(LLM Stats (zeroeval))Legal90
Language90
Finance90
Healthcare90
Math70
Physics70
Biology70
Chemistry70
Reasoning60
General60
Factuality40
Frontend Development40
Code40
Tarification
Prix d'entrée$16.5 / 1M tokens
Prix de sortie$66 / 1M tokens
Prix mixte (3:1)$28.875 / 1M tokens
Prix de lecture cache$7.5 / 1M tokens
Vitesse
Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
1 fournisseurs
FournisseurEntréeSortie
1OpenAIPRINCIPAL
$16.5
$66
Comparer les prix entre différents fournisseurs API pour ce modèle.