o1-preview
OpenAIOpenAI o-seriesProprietary
Описание
A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.
Дата выхода
2024-09-12
Параметры
—
Длина контекста
200K
Модальности
image, pdf, text
Радар способностей
41
general
34
coding
82
reasoning
77
science
68
agents
80
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 276 | 43.0 | AA |
| Общий рейтинг | 247 | 49.0 | AA |
| Наука | 64 | 78.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
73.3%Сам.
Code
SWE-Bench Verified
41.3%Сам.
Factuality
SimpleQA
42.4%Сам.
Finance
MMLU
90.8%Сам.
General
LiveBench
52.3%Сам.
Math
MGSM
90.8%Сам.
MATH
85.5%Сам.
AIME 2024
42.0%Сам.
Индексы оценки AA
(Artificial Analysis)Math Index(Artificial Analysis)79.3
Coding Index(Artificial Analysis)34.0
Intelligence Index(Artificial Analysis)17.2
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.9
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.8
Aime 25(MAA (Mathematical Association of America))0.8
Gpqa(NYU + Cohere + Anthropic (2023))0.8
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Legal90
Language90
Finance90
Healthcare90
Math70
Physics70
Biology70
Chemistry70
Reasoning60
General60
Factuality40
Frontend Development40
Code40
Цены
Цена ввода$16.5 / 1M токенов
Цена вывода$66 / 1M токенов
Смешанная цена (3:1)$28.875 / 1M токенов
Цена чтения кэша$7.5 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1OpenAIОсновной
$16.5
$66
Сравнение цен разных API-провайдеров для этой модели.