メインコンテンツへスキップ
AITier

GPT-4o (Aug '24)

OpenAIGPTProprietary

説明

GPT-4o ('o' for 'omni') is a multimodal AI model that accepts text, audio, image, and video inputs, and generates text, audio, and image outputs. It matches GPT-4 Turbo performance on text and code, with improvements in non-English languages, vision, and audio understanding.

リリース日
2024-08-06
パラメータ
—
コンテキスト長
128K
モダリティ
image, pdf, text

能力レーダー

8
general
32
coding
40
reasoning
35
science
50
agents
90
multimodal

ランキング

ドメイン#順位スコアソース
コーディングランキング345
31.0
AA
総合ランキング487
23.0
AA
マルチモーダルランキング42
49.0
LS
科学378
36.0
AA

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)70.1%自己申告

Code

SWE-Bench Verified33.2%自己申告
SWE-Lancer32.6%自己申告
Aider-Polyglot30.7%自己申告
Aider-Polyglot Edit18.2%自己申告
SWE-Lancer (IC-Diamond subset)12.4%自己申告

Communication

Tau2 Retail63.4%自己申告
Multi-IF60.9%自己申告
TAU-bench Retail60.3%自己申告
Tau2 Airline45.5%自己申告
TAU-bench Airline42.8%自己申告
Multi-Challenge40.3%自己申告
Tau2 Telecom23.5%自己申告

Factuality

SimpleQA38.2%自己申告

Finance

MMLU85.7%自己申告
MMLU-Pro74.7%自己申告

General

MMMLU81.4%自己申告
IFEvalGoogle Research (2023)81.0%自己申告
MMMU72.2%自己申告
MMMU-Pro59.9%自己申告
Internal API instruction following (hard)29.2%自己申告

Healthcare

VideoMMMU61.2%自己申告

Image To Text

DocVQADocVQA (2020)92.8%自己申告

Language

COLLIE61.0%自己申告

Long Context

EgoSchema72.2%自己申告
ComplexFuncBench66.5%自己申告
OpenAI-MRCR: 2 needle 128k31.9%自己申告

Math

MathVista61.4%自己申告
AIME 202413.1%自己申告
Humanity's Last Exam5.3%自己申告

Multimodal

AI2D94.2%自己申告
ChartQAMasry et al. (2022)85.7%自己申告
CharXiv-D85.3%自己申告
CharXiv-R58.8%自己申告

Reasoning

Graphwalks BFS <128k41.7%自己申告
Graphwalks parents <128k35.4%自己申告
ERQA35.2%自己申告

Video

ActivityNet61.9%自己申告

AA評価指数

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
9.4
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.8
Gpqa(NYU + Cohere + Anthropic (2023))
0.5
Lcr(Artificial Analysis)
0.4
Ifbench(Google Research (2023))
0.4
Scicode(UIUC + Argonne National Lab (2024))
0.3
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.3
Aime(MAA (Mathematical Association of America))
0.1
Terminalbench Hard(Stanford × Laude Institute (2026))
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.0

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Image To Text
90
Legal
80
Finance
80
Multimodal
70
Physics
70
Instruction Following
70
Language
70
Healthcare
70
Biology
70
Chemistry
70
Vision
70
Long Context
60
Structured Output
60
Writing
60
Math
50
Reasoning
50
General
50
Communication
50
Tool Calling
50
Spatial Reasoning
40
Factuality
40
Frontend Development
30
Code
30

価格設定

入力価格$2.5 / 1Mトークン
出力価格$10 / 1Mトークン
混合価格（3:1）$4.375 / 1Mトークン
キャッシュ読み取り価格$1.25 / 1Mトークン

速度

トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s

プロバイダー価格ランキング

プロバイダー価格ランキング

2 プロバイダー

最安: OpenAI最高: Azure
プロバイダー入力出力
1OpenAI最安
$0
$0.00001
2Azure
$0
$0.00001

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク

LLM StatsArtificial Analysis