GPT-4o (May '24)
OpenAIGPTProprietary
説明
GPT-4o ('o' for 'omni') is a multimodal AI model that accepts text, audio, image, and video inputs, and generates text, audio, and image outputs. It matches GPT-4 Turbo performance on text and code, with improvements in non-English languages, vision, and audio understanding.
リリース日
2024-05-13
パラメータ
—
コンテキスト長
128K
モダリティ
file, image, text
能力レーダー
31
general
28
coding
40
reasoning
35
science推定
0
agents
85
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| Code Ranking | 214 | 39.0 | AA |
| General Ranking | 274 | 39.0 | AA |
| Math Reasoning | 204 | 45.0 | AA |
| Science | 300 | 36.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
53.6%自己申告
Code
HumanEval
90.2%自己申告
Finance
MMLU
88.7%自己申告
MMLU-Pro
72.6%自己申告
Math
MGSM
90.5%自己申告
DROP
83.4%自己申告
MATH
76.6%自己申告
MathVista
63.8%自己申告
AA評価指数
Coding Index24.2
Intelligence Index14.5
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Livecodebench0.3
Scicode0.3
Aime0.1
Hle0.0
LLM Statsカテゴリスコア
Code90
Finance80
Healthcare80
Language80
Legal80
Math80
Reasoning80
General70
Vision60
Multimodal60
Biology50
Chemistry50
Physics50
価格設定
入力価格$5 / 1M tokens
出力価格$15 / 1M tokens
混合価格(3:1)$7.5 / 1M tokens
速度
トークン/秒102.9 tokens/s
初トークン遅延0.67s
初回答遅延0.67s
利用可能なプロバイダー
(LS内部単位)| プロバイダー | 入力価格 | 出力価格 |
|---|---|---|
| OpenAI | 2.5M | 10.0M |
| Azure | 2.5M | 10.0M |