Saltar al contenido principal

Gemma 3 12B Instruct

GoogleGemmaOpen WeightGemma · Uso Comercial

Descripción

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Fecha de lanzamiento
2025-03-12
Parámetros
12.0B
Longitud del contexto
131K
Modalidades
image, text

Radar de capacidades

60
general
60
coding
70
reasoning
34
scienceest.
67
agents
80
multimodal

Science se estima a partir de las puntuaciones científicas de LLM Stats o del razonamiento cuando no hay benchmarks científicos dedicados.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking multimodal107
40.0
LS

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.9%Aut.

Factuality

SimpleQA6.3%Aut.

General

Global-MMLU-Lite69.5%Aut.

Language

MMLU-Pro60.6%Aut.
WMT24++51.6%Aut.
ECLeKTic10.3%Aut.

Math

GSM8k94.4%Aut.
MATH83.8%Aut.
MathVista-Mini62.9%Aut.
HiddenMath54.5%Aut.

Reasoning

BIG-Bench Hard85.7%Aut.
HumanEvalOpenAI (2021)85.4%Aut.
Natural2Code80.7%Aut.
FACTS Grounding75.8%Aut.
ChartQAMasry et al. (2022)75.7%Aut.
MBPP0.73 / 100Aut.
Bird-SQL (dev)47.9%Aut.
GPQANYU + Cohere + Anthropic (2023)40.9%Aut.
LiveCodeBench24.6%Aut.
BIG-Bench Extra Hard16.3%Aut.

Vision

DocVQADocVQA (2020)87.1%Aut.
AI2D84.2%Aut.
VQAv2 (val)71.6%Aut.
TextVQA67.7%Aut.
InfoVQA64.9%Aut.
MMMU (val)59.6%Aut.

Índices de evaluación AA

(Artificial Analysis)

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Code
60
Language
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

Precios

Precio de entradaGratis
Precio de salidaGratis
Precio mixto (3:1)$0.075 / 1M tokens

Velocidad

No hay datos de velocidad disponibles

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

2 proveedores

Más barato: DeepInfraMás caro: Neon
ProveedorEntradaSalida
1DeepInfraMás barato
$0.05
$0.15
2Neon
$0.15
$0.5

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas