Gemma 3 12B Instruct
GoogleGemmaOpen WeightGemma · Usage Commercial
Description
Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.
Date de sortie
2025-03-12
Paramètres
12.0B
Longueur du contexte
131K
Modalités
image, text
Radar de capacités
20
general
15
coding
31
reasoning
23
scienceest.
26
agents
80
multimodal
Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.
Classements
| Domaine | #Rang | Score | Source |
|---|---|---|---|
| Classement codage | 459 | 8.0 | AA |
| Classement général | 421 | 24.0 | AA |
| Raisonnement mathématique | 253 | 33.0 | AA |
| Classement multimodal | 46 | 76.0 | LS |
| Raisonnement | 96 | 48.0 | LS |
| Science | 431 | 22.0 | AA |
Scores de benchmarks (LLM Stats)
Biology
GPQA
40.9%Aut.
Code
HumanEval
85.4%Aut.
LiveCodeBench
24.6%Aut.
Factuality
FACTS Grounding
75.8%Aut.
SimpleQA
6.3%Aut.
Finance
MMLU-Pro
60.6%Aut.
General
IFEval
88.9%Aut.
Natural2Code
80.7%Aut.
MBPP
0.73 / 100Aut.
Global-MMLU-Lite
69.5%Aut.
MMMU (val)
59.6%Aut.
BIG-Bench Extra Hard
16.3%Aut.
Image To Text
DocVQA
87.1%Aut.
VQAv2 (val)
71.6%Aut.
TextVQA
67.7%Aut.
Language
BIG-Bench Hard
85.7%Aut.
WMT24++
51.6%Aut.
ECLeKTic
10.3%Aut.
Math
GSM8k
94.4%Aut.
MATH
83.8%Aut.
MathVista-Mini
62.9%Aut.
HiddenMath
54.5%Aut.
Multimodal
AI2D
84.2%Aut.
ChartQA
75.7%Aut.
InfoVQA
64.9%Aut.
Reasoning
Bird-SQL (dev)
47.9%Aut.
Indices d'évaluation AA
Math Index18.3
Intelligence Index3.4
Math 5000.9
Mmlu Pro0.6
Ifbench0.4
Gpqa0.3
Aime0.2
Aime 250.2
Scicode0.2
Livecodebench0.1
Tau20.1
Lcr0.1
Hle0.0
Terminalbench Hard0.0
Scores par catégorie LLM Stats
Instruction Following90
Structured Output90
Image To Text80
Grounding80
Math70
Multimodal70
Vision70
Legal60
Reasoning60
Finance60
Healthcare60
Code60
Language50
General50
Physics40
Factuality40
Biology40
Chemistry40
Tarification
Prix d'entrée$0.09 / 1M tokens
Prix de sortie$0.29 / 1M tokens
Prix mixte (3:1)$0.14 / 1M tokens
Vitesse
Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s
Classement des Prix par Fournisseur
Classement des Prix par Fournisseur
6 fournisseurs
Moins cher: ChutesPlus cher: Cloudflare AI Gateway
FournisseurEntréeSortie
1ChutesMoins cher
$0.03
$0.1
2Helicone
$0.05
$0.1
3Amazon Bedrock
$0.05
$0.1
4GooglePRINCIPAL
$0.09
$0.29
5NanoGPT
$0.272
$0.272
6Cloudflare AI Gateway
$0.35
$0.56
Comparer les prix entre différents fournisseurs API pour ce modèle.