Passer au contenu principal

DeepSeek-V2.5 (Dec '24)

DeepSeekDeepSeekOpen Weightdeepseek

Description

DeepSeek-V2.5 is an upgraded version that combines DeepSeek-V2-Chat and DeepSeek-Coder-V2-Instruct, integrating general and coding abilities. It better aligns with human preferences and has been optimized in various aspects, including writing and instruction following.

Date de sortie
2024-12-10
Paramètres
236.0B
Longueur du contexte
Modalités
text

Radar de capacités

7
general
60
coding
76
reasoning
68
scienceest.
71
agents
0
multimodal

Science est estimé à partir des scores scientifiques de LLM Stats ou du raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement général571
9.0
AA

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Code

HumanEvalOpenAI (2021)89.0%Aut.
Aider72.2%Aut.
SWE-Bench Verified16.8%Aut.

Communication

MT-Bench0.90 / 100Aut.

Creativity

AlignBench80.4%Aut.
Arena Hard76.2%Aut.
AlpacaEval 2.050.5%Aut.

Finance

MMLU80.4%Aut.

General

DS-FIM-Eval78.3%Aut.
LiveCodeBench(01-09)41.8%Aut.

Language

BBH84.3%Aut.

Math

GSM8k95.1%Aut.
MATH74.7%Aut.

Reasoning

HumanEval-Mul73.8%Aut.
DS-Arena-Code63.1%Aut.

Indices d'évaluation AA

(Artificial Analysis)
Intelligence Index(Artificial Analysis)
6.5
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.8

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Roleplay
90
Communication
90
Legal
80
Math
80
Language
80
Finance
80
Healthcare
80
Reasoning
70
General
70
Creativity
70
Writing
70
Code
60
Frontend Development
20

Tarification

Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)Gratuit

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Aucune donnée de fournisseur disponible

Sources externes