Passer au contenu principal

DeepSeek Coder V2 Lite Instruct

DeepSeekDeepSeek
Date de sortie
2024-06-17
Paramètres
Longueur du contexte
1.0M
Modalités
text

Radar de capacités

15
general
15
coding
32
reasoning
20
scienceest.
60
agents
0
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage390
17.0
AA
Classement général469
17.0
AA
Science445
19.0
AA

Scores de benchmarks (LLM Stats)

Agents

GDPval-AA1332.00 / 3000Aut.
BrowseComp83.4%Aut.
MCP Atlas73.6%Aut.
Terminal-Bench 2.067.9%Aut.
SWE-Bench Pro55.4%Aut.
Toolathlon51.8%Aut.
FrontierSWE29.0%Aut.

Biology

GPQA90.1%Aut.

Code

LiveCodeBench93.5%Aut.
SWE-Bench Verified80.6%Aut.
SWE-bench Multilingual76.2%Aut.

Factuality

SimpleQA57.9%Aut.

Finance

MMLU-Pro87.5%Aut.

General

CSimpleQA84.4%Aut.
MRCR 1M83.5%Aut.
LiveBench73.6%Aut.
CorpusQA 1M62.0%Aut.

Math

CodeForces1.00 / 3000Aut.
HMMT Feb 2695.2%Aut.
MathArena Apex90.2%Aut.
IMO-AnswerBench89.8%Aut.
Humanity's Last Exam48.2%Aut.

Indices d'évaluation AA

Intelligence Index
3.1
Mmlu Pro
0.4
Gpqa
0.3
Livecodebench
0.2
Scicode
0.1
Hle
0.1

Scores par catégorie LLM Stats

Legal
100
Finance
100
Agents
100
General
100
Reasoning
71
Language
90
Physics
90
Healthcare
90
Biology
90
Chemistry
90
Long Context
80
Math
80
Search
80
Frontend Development
80
Code
70
Factuality
60
Tool Calling
60
Vision
50

Tarification

Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)Gratuit
Prix de lecture cache$0.00363 / 1M tokens

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Aucune donnée de fournisseur disponible

Sources externes