o1
OpenAIOpenAI o-seriesProprietary
Описание
A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.
Дата выхода
2024-12-05
Параметры
—
Длина контекста
200K
Модальности
image, pdf, text
Радар способностей
35
general
51
coding
80
reasoning
54
science
60
agents
70
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 279 | 53.0 | AA |
| Общий рейтинг | 189 | 56.0 | AA |
| Мультимодальный рейтинг | 59 | 56.0 | LS |
| Наука | 333 | 43.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQA Biology
69.2%Сам.
Chat
TAU-bench Retail
70.8%Сам.
Factuality
SimpleQA
47.0%Сам.
General
MMLU
91.8%Сам.
Language
MMMLU
87.7%Сам.
Math
GSM8k
97.1%Сам.
MATH
96.4%Сам.
MGSM
89.3%Сам.
AIME 2024
74.3%Сам.
MathVista
71.8%Сам.
LiveBench
67.0%Сам.
FrontierMath
5.5%Сам.
Multimodal
MMMU
77.6%Сам.
Reasoning
GPQA Physics
92.8%Сам.
HumanEvalOpenAI (2021)
88.1%Сам.
GPQANYU + Cohere + Anthropic (2023)
78.0%Сам.
GPQA Chemistry
64.7%Сам.
TAU-bench Airline
50.0%Сам.
SWE-Bench Verified
41.0%Сам.
Индексы оценки AA
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))97.0
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))84.1
Gpqa(NYU + Cohere + Anthropic (2023))74.7
Aime(MAA (Mathematical Association of America))72.3
Ifbench(Google Research (2023))70.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))67.9
Lcr(Artificial Analysis)65.0
Tau2(Sierra + U Toronto + Vector Institute (2025))62.6
Coding Index(Artificial Analysis)39.7
Intelligence Index(Artificial Analysis)15.2
Terminalbench Hard(Stanford × Laude Institute (2026))12.9
Hle(Center for AI Safety + Scale AI (2025))7.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Language90
Legal90
Finance90
Math80
Physics80
Healthcare80
Biology80
Chemistry80
Chat70
Multimodal70
Reasoning70
General70
Vision70
Code60
Communication60
Tool Calling60
Factuality50
Frontend Development40
Цены
Цена ввода$15 / 1M токенов
Цена вывода$60 / 1M токенов
Смешанная цена (3:1)$26.25 / 1M токенов
Цена чтения кэша$7.5 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
14 провайдеров
Самый дешевый: PoeСамый дорогой: LLM Gateway
ПровайдерВводВывод
1PoeСамый дешевый
$14
$54
2OpenAIОсновной
$15
$60
3NanoGPT
$15
$60
4OpenRouter
$15
$60
5Kilo Gateway
$15
$60
6Helicone
$15
$60
7Azure Cognitive Services
$15
$60
8Vercel AI Gateway
$15
$60
9DevPass (LLM Gateway)
$15
$60
10Azure
$15
$60
11Merge Gateway
$15
$60
12Impossibl
$15
$60
13Eden AI
$15
$60
14LLM Gateway
$15
$60
Сравнение цен разных API-провайдеров для этой модели.