DeepSeek V3 (Dec '24)
DeepSeekDeepSeekOpen WeightMIT + Model License (Commercial use allowed)
설명
A powerful Mixture-of-Experts (MoE) language model with 671B total parameters (37B activated per token). Features Multi-head Latent Attention (MLA), auxiliary-loss-free load balancing, and multi-token prediction training. Pre-trained on 14.8T tokens with strong performance in reasoning, math, and code tasks.
출시일
2024-12-26
파라미터
671.0B
컨텍스트 길이
164K
모달리티
text
능력 레이더
32
general
25
coding
38
reasoning
38
science추정
0
agents
0
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Code Ranking | 273 | 29.0 | AA |
| General Ranking | 306 | 36.0 | AA |
| Math Reasoning | 226 | 39.0 | AA |
| Reasoning | 36 | 76.0 | LS |
| Science | 272 | 40.0 | AA |
벤치마크 점수 (LLM Stats)
Biology
GPQA
59.1%자체 보고
Code
Aider-Polyglot Edit
79.7%자체 보고
Aider-Polyglot
49.6%자체 보고
SWE-Bench Verified
42.0%자체 보고
LiveCodeBench
37.6%자체 보고
Factuality
SimpleQA
24.9%자체 보고
Finance
MMLU
88.5%자체 보고
MMLU-Pro
75.9%자체 보고
General
MMLU-Redux
89.1%자체 보고
C-Eval
86.5%자체 보고
IFEval
86.1%자체 보고
CSimpleQA
64.8%자체 보고
LongBench v2
48.7%자체 보고
Language
CLUEWSC
90.9%자체 보고
Math
DROP
91.6%자체 보고
MATH-500
90.2%자체 보고
CNMO 2024
43.2%자체 보고
AIME 2024
39.2%자체 보고
Reasoning
HumanEval-Mul
82.6%자체 보고
FRAMES
73.3%자체 보고
AA 평가 지수
Math Index26.0
Intelligence Index16.5
Coding Index16.4
Math 5000.9
Mmlu Pro0.8
Gpqa0.6
Livecodebench0.4
Scicode0.4
Ifbench0.3
Lcr0.3
Aime 250.3
Aime0.3
Tau20.2
Terminalbench Hard0.1
Hle0.0
LLM Stats 카테고리 점수
Instruction Following90
Finance80
Healthcare80
Language80
Legal80
Structured Output70
General70
Math70
Reasoning70
Biology60
Chemistry60
Physics60
Code50
Long Context50
Frontend Development40
Factuality20
가격
입력 가격$0.4 / 1M tokens
출력 가격$0.89 / 1M tokens
혼합 가격 (3:1)$0.523 / 1M tokens
속도
토큰/초0.0 tokens/s
첫 토큰 지연0.00s
첫 응답 지연0.00s
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다