GPT-4
OpenAIGPTProprietary
Описание
GPT-4 is a large multimodal model capable of processing both image and text inputs and generating human-like text outputs. It demonstrates human-level performance on various professional and academic benchmarks.
Дата выхода
2023-03-14
Параметры
—
Длина контекста
8K
Модальности
image, text
Радар способностей
13
general
13
coding
70
reasoning
34
scienceоцен.
0
agents
80
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 323 | 22.0 | AA |
| General Ranking | 466 | 15.0 | AA |
| Reasoning | 3 | 95.0 | LS |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
35.7%Сам.
Code
HumanEval
67.0%Сам.
Finance
MMLU
86.4%Сам.
General
AI2 Reasoning Challenge (ARC)
96.3%Сам.
LSAT
88.0%Сам.
Language
Winogrande
87.5%Сам.
Legal
Uniform Bar Exam
90.0%Сам.
Math
SAT Math
89.0%Сам.
DROP
80.9%Сам.
MGSM
74.5%Сам.
MATH
42.0%Сам.
Reasoning
HellaSwag
95.3%Сам.
Индексы оценки AA
Coding Index13.1
Intelligence Index12.8
Оценки категорий LLM Stats
Finance90
Healthcare90
Language90
Legal90
Code70
Math70
Reasoning70
General60
Biology40
Chemistry40
Physics40
Цены
Цена ввода$30 / 1M tokens
Цена вывода$60 / 1M tokens
Смешанная цена (3:1)$37.5 / 1M tokens
Скорость
Токенов/сек24.1 tokens/s
Задержка первого токена1.00s
Время до первого ответа1.00s
Доступные провайдеры
(Внутренние единицы LS)| Провайдер | Цена ввода | Цена вывода |
|---|---|---|
| OpenAI | 30.0M | 60.0M |
| Azure | 30.0M | 60.0M |