Passer au contenu principal

Gemma 3 12B Instruct

GoogleGemmaOpen WeightGemma · Usage Commercial

Description

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Date de sortie
2025-03-12
Paramètres
12.0B
Longueur du contexte
131K
Modalités
image, text

Radar de capacités

60
general
60
coding
70
reasoning
34
scienceest.
67
agents
80
multimodal

Science est estimé à partir des scores scientifiques de LLM Stats ou du raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement multimodal107
40.0
LS

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.9%Aut.

Factuality

SimpleQA6.3%Aut.

General

Global-MMLU-Lite69.5%Aut.

Language

MMLU-Pro60.6%Aut.
WMT24++51.6%Aut.
ECLeKTic10.3%Aut.

Math

GSM8k94.4%Aut.
MATH83.8%Aut.
MathVista-Mini62.9%Aut.
HiddenMath54.5%Aut.

Reasoning

BIG-Bench Hard85.7%Aut.
HumanEvalOpenAI (2021)85.4%Aut.
Natural2Code80.7%Aut.
FACTS Grounding75.8%Aut.
ChartQAMasry et al. (2022)75.7%Aut.
MBPP0.73 / 100Aut.
Bird-SQL (dev)47.9%Aut.
GPQANYU + Cohere + Anthropic (2023)40.9%Aut.
LiveCodeBench24.6%Aut.
BIG-Bench Extra Hard16.3%Aut.

Vision

DocVQADocVQA (2020)87.1%Aut.
AI2D84.2%Aut.
VQAv2 (val)71.6%Aut.
TextVQA67.7%Aut.
InfoVQA64.9%Aut.
MMMU (val)59.6%Aut.

Indices d'évaluation AA

(Artificial Analysis)

Aucune donnée d'évaluation AA disponible

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Code
60
Language
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

Tarification

Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)$0.075 / 1M tokens

Vitesse

Aucune donnée de vitesse disponible

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

2 fournisseurs

Moins cher: DeepInfraPlus cher: Neon
FournisseurEntréeSortie
1DeepInfraMoins cher
$0.05
$0.15
2Neon
$0.15
$0.5

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes