Saltar al contenido principal

Gemma 2 27B

GoogleGemmaOpen WeightGemma · Commercial OK

Descripción

Gemma 2 27B IT is an instruction-tuned version of Google's state-of-the-art open language model. Built from the same research and technology as Gemini, it's optimized for dialogue applications through supervised fine-tuning, distillation from larger models, and RLHF. The model excels at text generation tasks including question answering, summarization, and reasoning.

Fecha de lanzamiento
2024-06-27
Parámetros
27.2B
Longitud del contexto
8K
Modalidades
text

Radar de capacidades

70
general
50
coding
60
reasoning
68
scienceest.
0
agents
0
multimodal

Science usa un proxy de razonamiento cuando los benchmarks científicos dedicados no están disponibles.

Rankings

Dominio#PosiciónPuntuaciónFuente
Reasoning20
86.0
LS

Puntuaciones de benchmarks (LLM Stats)

Code

HumanEval51.8%Aut.

Creativity

Social IQa53.7%Aut.

Finance

MMLU75.2%Aut.

General

ARC-E88.6%Aut.
TriviaQA83.7%Aut.
PIQA83.2%Aut.
ARC-C71.4%Aut.
MBPP0.63 / 100Aut.
AGIEval55.1%Aut.
Natural Questions34.5%Aut.

Language

BoolQ84.8%Aut.
Winogrande83.7%Aut.
BIG-Bench74.9%Aut.

Math

GSM8k74.0%Aut.
MATH42.3%Aut.

Reasoning

HellaSwag86.4%Aut.

Índices de evaluación AA

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

Finance
80
Healthcare
80
Language
80
Physics
80
General
70
Legal
70
Reasoning
70
Math
60
Code
50
Creativity
50
Psychology
50
Search
30

Precios

Precio de entrada$0.65 / 1M tokens
Precio de salida$0.65 / 1M tokens
Precio mixto (3:1)$0.65 / 1M tokens

Velocidad

No hay datos de velocidad disponibles

Proveedores disponibles

(Unidades internas LS)

No hay datos de proveedores disponibles

Fuentes externas