Passer au contenu principal

Gemma 3 4B Instruct

GoogleGemmaOpen WeightGemma · Usage Commercial

Description

Gemma 3 4B is a 4-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Date de sortie
2025-03-12
Paramètres
4.0B
Longueur du contexte
131K
Modalités
image, text

Radar de capacités

16
general
6
coding
22
reasoning
22
science
17
agents
70
multimodal

Classements

Domaine#RangScoreSource
Classement codage616
5.0
AA
Classement général631
15.0
AA
Classement multimodal133
32.0
LS
Science623
15.0
AA

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)90.2%Aut.

Factuality

SimpleQA4.0%Aut.

General

Global-MMLU-Lite54.5%Aut.

Language

WMT24++46.8%Aut.
MMLU-Pro43.6%Aut.
ECLeKTic4.6%Aut.

Math

GSM8k89.2%Aut.
MATH75.6%Aut.
MathVista-Mini50.0%Aut.
HiddenMath43.0%Aut.

Reasoning

BIG-Bench Hard72.2%Aut.
HumanEvalOpenAI (2021)71.3%Aut.
Natural2Code70.3%Aut.
FACTS Grounding70.1%Aut.
ChartQAMasry et al. (2022)68.8%Aut.
MBPP0.63 / 100Aut.
Bird-SQL (dev)36.3%Aut.
GPQANYU + Cohere + Anthropic (2023)30.8%Aut.
LiveCodeBench12.6%Aut.
BIG-Bench Extra Hard11.0%Aut.

Vision

DocVQADocVQA (2020)75.8%Aut.
AI2D74.8%Aut.
VQAv2 (val)62.4%Aut.
TextVQA57.8%Aut.
InfoVQA50.0%Aut.
MMMU (val)48.8%Aut.

Indices d'évaluation AA

(Artificial Analysis)
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
76.6
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
41.7
Gpqa(NYU + Cohere + Anthropic (2023))
29.1
Ifbench(Google Research (2023))
28.3
Math Index(Artificial Analysis)
12.7
Aime 25(MAA (Mathematical Association of America))
12.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))
11.2
Lcr(Artificial Analysis)
6.7
Aime(MAA (Mathematical Association of America))
6.3
Hle(Center for AI Safety + Scale AI (2025))
5.3
Tau2(Sierra + U Toronto + Vector Institute (2025))
5.0
Intelligence Index(Artificial Analysis)
4.8
Coding Index(Artificial Analysis)
2.7
Terminalbench Hard(Stanford × Laude Institute (2026))
0.8
Tau Banking
0.4
Terminalbench V2 1
0.4

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Image To Text
70
Grounding
70
Math
60
Multimodal
60
Vision
60
Reasoning
50
General
50
Healthcare
50
Language
40
Legal
40
Factuality
40
Finance
40
Code
40
Physics
30
Biology
30
Chemistry
30

Tarification

Prix d'entréeGratuit
Prix de sortieGratuit
Prix mixte (3:1)Gratuit

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

6 fournisseurs

Moins cher: DeepInfraPlus cher: Kilo Gateway
FournisseurEntréeSortie
1DeepInfraMoins cher
$0
$0
2Merge Gateway
$0.04
$0.08
3OpenRouter
$0.05
$0.1
4Hugging Face
$0.05
$0.1
5Deep Infra
$0.05
$0.1
6Kilo Gateway
$0.05
$0.1

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes