Passer au contenu principal

Gemma 3 4B Instruct

GoogleGemmaOpen WeightGemma · Usage Commercial

Description

Gemma 3 4B is a 4-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Date de sortie
2025-03-12
Paramètres
4.0B
Longueur du contexte
131K
Modalités
image, text

Radar de capacités

14
general
10
coding
22
reasoning
17
scienceest.
18
agents
70
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage464
7.0
AA
Classement général489
14.0
AA
Raisonnement mathématique290
24.0
AA
Classement multimodal76
65.0
LS
Raisonnement101
36.0
LS
Science479
14.0
AA

Scores de benchmarks (LLM Stats)

Biology

GPQA30.8%Aut.

Code

HumanEval71.3%Aut.
LiveCodeBench12.6%Aut.

Factuality

FACTS Grounding70.1%Aut.
SimpleQA4.0%Aut.

Finance

MMLU-Pro43.6%Aut.

General

IFEval90.2%Aut.
Natural2Code70.3%Aut.
MBPP0.63 / 100Aut.
Global-MMLU-Lite54.5%Aut.
MMMU (val)48.8%Aut.
BIG-Bench Extra Hard11.0%Aut.

Image To Text

DocVQA75.8%Aut.
VQAv2 (val)62.4%Aut.
TextVQA57.8%Aut.

Language

BIG-Bench Hard72.2%Aut.
WMT24++46.8%Aut.
ECLeKTic4.6%Aut.

Math

GSM8k89.2%Aut.
MATH75.6%Aut.
MathVista-Mini50.0%Aut.
HiddenMath43.0%Aut.

Multimodal

AI2D74.8%Aut.
ChartQA68.8%Aut.
InfoVQA50.0%Aut.

Reasoning

Bird-SQL (dev)36.3%Aut.

Indices d'évaluation AA

Math Index
12.7
Intelligence Index
1.1
Math 500
0.8
Mmlu Pro
0.4
Gpqa
0.3
Ifbench
0.3
Aime 25
0.1
Livecodebench
0.1
Scicode
0.1
Aime
0.1
Lcr
0.1
Hle
0.1
Tau2
0.0
Terminalbench Hard
0.0

Scores par catégorie LLM Stats

Instruction Following
90
Structured Output
90
Image To Text
70
Grounding
70
Math
60
Multimodal
60
Vision
60
Reasoning
50
Healthcare
50
Language
40
Legal
40
Factuality
40
Finance
40
General
40
Code
40
Physics
30
Biology
30
Chemistry
30

Tarification

Prix d'entrée$0.04 / 1M tokens
Prix de sortie$0.08 / 1M tokens
Prix mixte (3:1)$0.05 / 1M tokens

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

6 fournisseurs

Moins cher: ChutesPlus cher: NanoGPT
FournisseurEntréeSortie
1ChutesMoins cher
$0.01
$0.0272
2GooglePRINCIPAL
$0.04
$0.08
3Kilo Gateway
$0.04
$0.08
4Amazon Bedrock
$0.04
$0.08
5OpenRouter
$0.05
$0.1
6NanoGPT
$0.2006
$0.2006

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes