Passer au contenu principal

Gemma 3 27B Instruct

GoogleGemmaOpen WeightGemma · Usage Commercial

Description

Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.

Date de sortie
2025-03-12
Paramètres
27.0B
Longueur du contexte
131K
Modalités
image, text

Radar de capacités

23
general
15
coding
34
reasoning
28
scienceest.
28
agents
70
multimodal

Science utilise un proxy de raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement codage456
9.0
AA
Classement général409
25.0
AA
Raisonnement mathématique247
35.0
AA
Classement multimodal45
76.0
LS
Raisonnement84
54.0
LS
Science399
27.0
AA

Scores de benchmarks (LLM Stats)

Biology

GPQA42.4%Aut.

Code

HumanEval87.8%Aut.
LiveCodeBench29.7%Aut.

Factuality

FACTS Grounding74.9%Aut.
SimpleQA10.0%Aut.

Finance

MMLU-Pro67.5%Aut.

General

IFEval90.4%Aut.
Natural2Code84.5%Aut.
Global-MMLU-Lite75.1%Aut.
MBPP0.74 / 100Aut.
MMMU (val)64.9%Aut.
BIG-Bench Extra Hard19.3%Aut.

Image To Text

DocVQA86.6%Aut.
VQAv2 (val)71.0%Aut.
TextVQA65.1%Aut.

Language

BIG-Bench Hard87.6%Aut.
WMT24++53.4%Aut.
ECLeKTic16.7%Aut.

Math

GSM8k95.9%Aut.
MATH89.0%Aut.
MathVista-Mini67.6%Aut.
HiddenMath60.3%Aut.

Multimodal

AI2D84.5%Aut.
ChartQA78.0%Aut.
InfoVQA70.6%Aut.

Reasoning

Bird-SQL (dev)54.4%Aut.

Indices d'évaluation AA

Math Index
20.7
Intelligence Index
4.8
Math 500
0.9
Mmlu Pro
0.7
Gpqa
0.4
Ifbench
0.3
Aime
0.3
Scicode
0.2
Aime 25
0.2
Livecodebench
0.1
Tau2
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

Scores par catégorie LLM Stats

Instruction Following
90
Structured Output
90
Math
80
Image To Text
70
Legal
70
Multimodal
70
Finance
70
Grounding
70
Healthcare
70
Vision
70
Language
60
Reasoning
60
General
60
Code
60
Physics
40
Factuality
40
Biology
40
Chemistry
40

Tarification

Prix d'entrée$0.11 / 1M tokens
Prix de sortie$0.25 / 1M tokens
Prix mixte (3:1)$0.145 / 1M tokens

Vitesse

Tokens/sec0.0
Délai du premier token0.00s
Temps de réponse0.00s

Classement des Prix par Fournisseur

Classement des Prix par Fournisseur

12 fournisseurs

Moins cher: ChutesPlus cher: STACKIT
FournisseurEntréeSortie
1ChutesMoins cher
$0.0272
$0.1087
2Kilo Gateway
$0.03
$0.11
3OpenRouter
$0.08
$0.16
4Nebius Token Factory
$0.1
$0.3
5GooglePRINCIPAL
$0.11
$0.25
6NovitaAI
$0.119
$0.2
7Amazon Bedrock
$0.12
$0.2
8Venice AI
$0.12
$0.2
9Scaleway
$0.25
$0.5
10LLM Gateway
$0.27
$0.27
11NanoGPT
$0.2992
$0.2992
12STACKIT
$0.49
$0.71

Comparer les prix entre différents fournisseurs API pour ce modèle.

Sources externes