o3-mini
OpenAIOpenAI o-seriesProprietary
설명
A smaller variant of O3, expected to offer enhanced multimodal capabilities, improved reasoning, and more efficient resource utilization compared to previous models while maintaining strong performance on core tasks.
출시일
2025-01-31
파라미터
—
컨텍스트 길이
200K
모달리티
file, text
능력 레이더
39
general
39
coding
83
reasoning
49
science추정
40
agents
85
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Code Ranking | 230 | 37.0 | AA |
| General Ranking | 214 | 48.0 | AA |
| Math Reasoning | 50 | 89.0 | AA |
| Reasoning | 78 | 54.0 | LS |
| Science | 146 | 54.0 | AA |
벤치마크 점수 (LLM Stats)
Biology
GPQA
77.2%자체 보고
Code
Aider-Polyglot
66.7%자체 보고
Aider-Polyglot Edit
60.4%자체 보고
SWE-Bench Verified
49.3%자체 보고
SWE-Lancer
18.0%자체 보고
SWE-Lancer (IC-Diamond subset)
7.4%자체 보고
Communication
Multi-IF
79.5%자체 보고
TAU-bench Retail
57.6%자체 보고
Multi-Challenge
39.9%자체 보고
TAU-bench Airline
32.4%자체 보고
Factuality
SimpleQA
15.0%자체 보고
Finance
MMLU
86.9%자체 보고
General
IFEval
93.9%자체 보고
LiveBench
84.6%자체 보고
Multilingual MMLU
80.7%자체 보고
Internal API instruction following (hard)
50.0%자체 보고
Language
COLLIE
98.7%자체 보고
Long Context
OpenAI-MRCR: 2 needle 128k
18.7%자체 보고
ComplexFuncBench
17.6%자체 보고
Math
MATH
97.9%자체 보고
MGSM
92.0%자체 보고
AIME 2024
87.3%자체 보고
FrontierMath
9.2%자체 보고
Reasoning
Graphwalks parents <128k
58.3%자체 보고
Graphwalks BFS <128k
51.0%자체 보고
AA 평가 지수
Intelligence Index25.9
Coding Index17.9
Math 5001.0
Mmlu Pro0.8
Aime0.8
Gpqa0.7
Livecodebench0.7
Scicode0.4
Tau20.3
Hle0.1
Terminalbench Hard0.1
LLM Stats 카테고리 점수
Writing100
Finance90
Healthcare90
Instruction Following90
Language90
Legal90
Biology80
Chemistry80
Math80
Physics80
General70
Structured Output60
Reasoning60
Spatial Reasoning50
Communication50
Frontend Development50
Tool Calling40
Code40
Long Context20
Factuality10
가격
입력 가격$1.1 / 1M tokens
출력 가격$4.4 / 1M tokens
혼합 가격 (3:1)$1.925 / 1M tokens
속도
토큰/초135.1 tokens/s
첫 토큰 지연10.07s
첫 응답 지연10.07s
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다