o1
OpenAIOpenAI o-seriesProprietary
Описание
A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.
Дата выхода
2024-12-05
Параметры
—
Длина контекста
200K
Модальности
image, pdf, text
Радар способностей
70
general
60
coding
80
reasoning
68
scienceоцен.
60
agents
70
multimodal
При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.
Рейтинги
Нет данных рейтинга
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQA Biology
69.2%Сам.
Chat
TAU-bench Retail
70.8%Сам.
Factuality
SimpleQA
47.0%Сам.
General
MMLU
91.8%Сам.
Language
MMMLU
87.7%Сам.
Math
GSM8k
97.1%Сам.
MATH
96.4%Сам.
MGSM
89.3%Сам.
AIME 2024
74.3%Сам.
MathVista
71.8%Сам.
LiveBench
67.0%Сам.
FrontierMath
5.5%Сам.
Multimodal
MMMU
77.6%Сам.
Reasoning
GPQA Physics
92.8%Сам.
HumanEvalOpenAI (2021)
88.1%Сам.
GPQANYU + Cohere + Anthropic (2023)
78.0%Сам.
GPQA Chemistry
64.7%Сам.
TAU-bench Airline
50.0%Сам.
SWE-Bench Verified
41.0%Сам.
Индексы оценки AA
(Artificial Analysis)Нет данных AA оценки
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Language90
Legal90
Finance90
Math80
Physics80
Healthcare80
Biology80
Chemistry80
Chat70
Multimodal70
Reasoning70
General70
Vision70
Code60
Communication60
Tool Calling60
Factuality50
Frontend Development40
Цены
Цена ввода$15 / 1M токенов
Цена вывода$60 / 1M токенов
Смешанная цена (3:1)$26.25 / 1M токенов
Цена чтения кэша$7.5 / 1M токенов
Скорость
Нет данных о скорости
Рейтинг цен провайдеров
Рейтинг цен провайдеров
4 провайдеров
Самый дешевый: OpenAIСамый дорогой: Azure
ПровайдерВводВывод
1OpenAIОсновной
$15
$60
2Helicone
$15
$60
3Azure Cognitive Services
$15
$60
4Azure
$15
$60
Сравнение цен разных API-провайдеров для этой модели.