Saltar al contenido principal

DeepSeek Coder V2 Lite Instruct

DeepSeekDeepSeek
Fecha de lanzamiento
2024-06-17
Parámetros
Longitud del contexto
1.0M
Modalidades
text

Radar de capacidades

15
general
15
coding
32
reasoning
20
scienceest.
60
agents
0
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación390
17.0
AA
Ranking general469
17.0
AA
Ciencia445
19.0
AA

Puntuaciones de benchmarks (LLM Stats)

Agents

GDPval-AA1332.00 / 3000Aut.
BrowseComp83.4%Aut.
MCP Atlas73.6%Aut.
Terminal-Bench 2.067.9%Aut.
SWE-Bench Pro55.4%Aut.
Toolathlon51.8%Aut.
FrontierSWE29.0%Aut.

Biology

GPQA90.1%Aut.

Code

LiveCodeBench93.5%Aut.
SWE-Bench Verified80.6%Aut.
SWE-bench Multilingual76.2%Aut.

Factuality

SimpleQA57.9%Aut.

Finance

MMLU-Pro87.5%Aut.

General

CSimpleQA84.4%Aut.
MRCR 1M83.5%Aut.
LiveBench73.6%Aut.
CorpusQA 1M62.0%Aut.

Math

CodeForces1.00 / 3000Aut.
HMMT Feb 2695.2%Aut.
MathArena Apex90.2%Aut.
IMO-AnswerBench89.8%Aut.
Humanity's Last Exam48.2%Aut.

Índices de evaluación AA

Intelligence Index
3.1
Mmlu Pro
0.4
Gpqa
0.3
Livecodebench
0.2
Scicode
0.1
Hle
0.1

Puntuaciones por categoría LLM Stats

Legal
100
Finance
100
Agents
100
General
100
Reasoning
71
Language
90
Physics
90
Healthcare
90
Biology
90
Chemistry
90
Long Context
80
Math
80
Search
80
Frontend Development
80
Code
70
Factuality
60
Tool Calling
60
Vision
50

Precios

Precio de entradaGratis
Precio de salidaGratis
Precio mixto (3:1)Gratis
Precio de lectura caché$0.00363 / 1M tokens

Velocidad

Tokens/seg0.0
Retraso del primer token0.00s
Tiempo hasta la respuesta0.00s

Ranking de Precios por Proveedor

No hay datos de proveedores disponibles

Fuentes externas