Saltar al contenido principal

Qwen2.5 Coder Instruct 7B

AlibabaQwenOpen WeightApache 2.0 · Uso Comercial

Descripción

Qwen2.5-Coder is a specialized coding model trained on 5.5 trillion tokens of code data, supporting 92 programming languages with a 128K context window. It excels in code generation, completion, and repair while maintaining strong performance in math and general tasks. The model demonstrates exceptional capabilities in multi-programming language tasks and code reasoning.

Fecha de lanzamiento
2024-09-19
Parámetros
7.0B
Longitud del contexto
—
Modalidades
—

Radar de capacidades

60
general
50
coding
60
reasoning
26
scienceest.
57
agents
0
multimodal

Science se estima a partir de las puntuaciones científicas de LLM Stats o del razonamiento cuando no hay benchmarks científicos dedicados.

Rankings

No hay datos de ranking disponibles

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU67.6%Aut.
TruthfulQA50.6%Aut.
BigCodeBench41.0%Aut.

Language

MMLU-Base68.0%Aut.
MMLU-Redux66.6%Aut.
MMLU-Pro40.1%Aut.

Math

GSM8k83.9%Aut.
MATH46.6%Aut.
TheoremQA34.0%Aut.
STEM34.0%Aut.

Reasoning

HumanEvalOpenAI (2021)88.4%Aut.
MBPP0.83 / 100Aut.
HellaSwagAI2 (2019)76.8%Aut.
Winogrande72.9%Aut.
ARC-C60.9%Aut.
CRUXEval-Input-CoT56.5%Aut.
CRUXEval-Output-CoT56.0%Aut.
Aider55.6%Aut.
LiveCodeBench18.2%Aut.

Índices de evaluación AA

(Artificial Analysis)

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Language
60
Math
60
Reasoning
60
General
60
Legal
50
Finance
50
Healthcare
50
Code
50
Physics
30

Precios

No hay datos de precios disponibles

Velocidad

No hay datos de velocidad disponibles

Ranking de Precios por Proveedor

No hay datos de proveedores disponibles

Fuentes externas