GPT-3.5 Turbo
OpenAIProprietary
Описание
The latest GPT-3.5 Turbo model with higher accuracy at responding in requested formats and a fix for a bug which caused a text encoding issue for non-English language function calls.
Дата выхода
2022-11-30
Параметры
—
Длина контекста
16K
Модальности
text
Радар способностей
22
general
11
coding
38
reasoning
30
scienceоцен.
0
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Code Ranking | 361 | 18.0 | AA |
| General Ranking | 432 | 21.0 | AA |
| Math Reasoning | 220 | 41.0 | AA |
| Science | 393 | 24.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
30.8%Сам.
Code
HumanEval
68.0%Сам.
Finance
MMLU
69.8%Сам.
General
MMMU
0.0%Сам.
Math
DROP
70.2%Сам.
MGSM
56.3%Сам.
MATH
43.1%Сам.
MathVista
0.0%Сам.
Индексы оценки AA
Coding Index10.7
Intelligence Index9.0
Mmlu Pro0.5
Math 5000.4
Gpqa0.3
Оценки категорий LLM Stats
Code70
Finance70
Language70
Legal70
Math50
Reasoning50
Biology30
Chemistry30
General30
Healthcare30
Physics30
Vision0
Multimodal0
Цены
Цена ввода$0.5 / 1M tokens
Цена вывода$1.5 / 1M tokens
Смешанная цена (3:1)$0.75 / 1M tokens
Скорость
Токенов/сек75.6 tokens/s
Задержка первого токена0.47s
Время до первого ответа0.47s
Доступные провайдеры
(Внутренние единицы LS)| Провайдер | Цена ввода | Цена вывода |
|---|---|---|
| Azure | 500K | 1.5M |
| OpenAI | 500K | 1.5M |