Перейти к основному содержанию

o1

OpenAIOpenAI o-seriesProprietary

Описание

A research preview model focused on mathematical and logical reasoning capabilities, demonstrating improved performance on tasks requiring step-by-step reasoning, mathematical problem-solving, and code generation. The model shows enhanced capabilities in formal reasoning while maintaining strong general capabilities.

Дата выхода
2024-12-05
Параметры
—
Длина контекста
200K
Модальности
image, pdf, text

Радар способностей

70
general
60
coding
80
reasoning
68
scienceоцен.
60
agents
70
multimodal

При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.

Рейтинги

Нет данных рейтинга

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQA Biology69.2%Сам.

Chat

TAU-bench Retail70.8%Сам.

Factuality

SimpleQA47.0%Сам.

General

MMLU91.8%Сам.

Language

MMMLU87.7%Сам.

Math

GSM8k97.1%Сам.
MATH96.4%Сам.
MGSM89.3%Сам.
AIME 202474.3%Сам.
MathVista71.8%Сам.
LiveBench67.0%Сам.
FrontierMath5.5%Сам.

Multimodal

MMMU77.6%Сам.

Reasoning

GPQA Physics92.8%Сам.
HumanEvalOpenAI (2021)88.1%Сам.
GPQANYU + Cohere + Anthropic (2023)78.0%Сам.
GPQA Chemistry64.7%Сам.
TAU-bench Airline50.0%Сам.
SWE-Bench Verified41.0%Сам.

Индексы оценки AA

(Artificial Analysis)

Нет данных AA оценки

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Language
90
Legal
90
Finance
90
Math
80
Physics
80
Healthcare
80
Biology
80
Chemistry
80
Chat
70
Multimodal
70
Reasoning
70
General
70
Vision
70
Code
60
Communication
60
Tool Calling
60
Factuality
50
Frontend Development
40

Цены

Цена ввода$15 / 1M токенов
Цена вывода$60 / 1M токенов
Смешанная цена (3:1)$26.25 / 1M токенов
Цена чтения кэша$7.5 / 1M токенов

Скорость

Нет данных о скорости

Рейтинг цен провайдеров

Рейтинг цен провайдеров

4 провайдеров

Самый дешевый: OpenAIСамый дорогой: Azure
ПровайдерВводВывод
1OpenAIОсновной
$15
$60
2Helicone
$15
$60
3Azure Cognitive Services
$15
$60
4Azure
$15
$60

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки