メインコンテンツへスキップ

GPT-4o (Aug '24)

OpenAIGPTProprietary

説明

GPT-4o ('o' for 'omni') is a multimodal AI model that accepts text, audio, image, and video inputs, and generates text, audio, and image outputs. It matches GPT-4 Turbo performance on text and code, with improvements in non-English languages, vision, and audio understanding.

リリース日
2024-08-06
パラメータ
—
コンテキスト長
128K
モダリティ
image, pdf, text

能力レーダー

50
general
30
coding
50
reasoning
60
science推定
50
agents
90
multimodal

専用の科学ベンチマークがない場合、Science は LLM Stats の科学スコアまたは推論能力から推定します。

ランキング

ドメイン#順位スコアソース
マルチモーダルランキング114
37.0
LS

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)81.0%自己申告
Multi-IF60.9%自己申告
TAU-bench Retail60.3%自己申告
Tau2 Airline45.5%自己申告
Multi-Challenge40.3%自己申告

Communication

Tau2 Retail63.4%自己申告
Tau2 Telecom23.5%自己申告

Factuality

SimpleQA38.2%自己申告

General

MMLU85.7%自己申告
Aider-Polyglot30.7%自己申告
Internal API instruction following (hard)29.2%自己申告
Aider-Polyglot Edit18.2%自己申告

Language

MMMLU81.4%自己申告
MMLU-Pro74.7%自己申告
COLLIE61.0%自己申告

Long Context

ComplexFuncBench66.5%自己申告
OpenAI-MRCR: 2 needle 128k31.9%自己申告

Math

MathVista61.4%自己申告
AIME 202413.1%自己申告

Multimodal

MMMU72.2%自己申告
VideoMMMU61.2%自己申告

Reasoning

ChartQAMasry et al. (2022)85.7%自己申告
CharXiv-D85.3%自己申告
GPQANYU + Cohere + Anthropic (2023)70.1%自己申告
CharXiv-R58.8%自己申告
TAU-bench Airline42.8%自己申告
Graphwalks BFS <128k41.7%自己申告
Graphwalks parents <128k35.4%自己申告
SWE-Bench Verified33.2%自己申告
SWE-Lancer32.6%自己申告
SWE-Lancer (IC-Diamond subset)12.4%自己申告
Humanity's Last Exam5.3%自己申告

Vision

AI2D94.2%自己申告
DocVQADocVQA (2020)92.8%自己申告
EgoSchema72.2%自己申告
ActivityNet61.9%自己申告
MMMU-Pro59.9%自己申告
ERQA35.2%自己申告

AA評価指数

(Artificial Analysis)

AA評価データがありません

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Image To Text
90
Legal
80
Finance
80
Instruction Following
70
Language
70
Multimodal
70
Physics
70
Healthcare
70
Biology
70
Chemistry
70
Vision
70
Chat
60
Long Context
60
Structured Output
60
Writing
60
Math
50
Reasoning
50
General
50
Communication
50
Tool Calling
50
Spatial Reasoning
40
Factuality
40
Frontend Development
30
Code
30

価格設定

入力価格$2.5 / 1Mトークン
出力価格$10 / 1Mトークン
混合価格(3:1)$4.375 / 1Mトークン
キャッシュ読み取り価格$1.25 / 1Mトークン

速度

トークン/秒165.7
初トークン遅延1.84s
初回答遅延1.84s

プロバイダー価格ランキング

プロバイダー価格ランキング

2 プロバイダー

最安: OpenAI最高: Azure
プロバイダー入力出力
1OpenAIプライマリ
$2.5
$10
2Azure
$2.5
$10

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク