GPT-4o (May '24)
OpenAIGPTProprietary
Описание
GPT-4o ('o' for 'omni') is a multimodal AI model that accepts text, audio, image, and video inputs, and generates text, audio, and image outputs. It matches GPT-4 Turbo performance on text and code, with improvements in non-English languages, vision, and audio understanding.
Дата выхода
2024-05-13
Параметры
—
Длина контекста
128K
Модальности
file, image, text
Радар способностей
31
general
28
coding
40
reasoning
35
scienceоцен.
0
agents
85
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 214 | 39.0 | AA |
| General Ranking | 274 | 39.0 | AA |
| Math Reasoning | 204 | 45.0 | AA |
| Science | 300 | 36.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
53.6%Сам.
Code
HumanEval
90.2%Сам.
Finance
MMLU
88.7%Сам.
MMLU-Pro
72.6%Сам.
Math
MGSM
90.5%Сам.
DROP
83.4%Сам.
MATH
76.6%Сам.
MathVista
63.8%Сам.
Индексы оценки AA
Coding Index24.2
Intelligence Index14.5
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Livecodebench0.3
Scicode0.3
Aime0.1
Hle0.0
Оценки категорий LLM Stats
Code90
Finance80
Healthcare80
Language80
Legal80
Math80
Reasoning80
General70
Vision60
Multimodal60
Biology50
Chemistry50
Physics50
Цены
Цена ввода$5 / 1M tokens
Цена вывода$15 / 1M tokens
Смешанная цена (3:1)$7.5 / 1M tokens
Скорость
Токенов/сек102.9 tokens/s
Задержка первого токена0.67s
Время до первого ответа0.67s
Доступные провайдеры
(Внутренние единицы LS)| Провайдер | Цена ввода | Цена вывода |
|---|---|---|
| OpenAI | 2.5M | 10.0M |
| Azure | 2.5M | 10.0M |