मुख्य सामग्री पर जाएं
AITier

Gemma 3 12B Instruct

GoogleGemmaओपन वेटGemma · व्यावसायिक उपयोग

विवरण

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

रिलीज़ तिथि
2025-03-12
पैरामीटर
12.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
image, text

क्षमता रडार

21
general
10
coding
31
reasoning
22
science
25
agents
80
multimodal

रैंकिंग

डोमेन#रैंकस्कोरस्रोत
कोडिंग रैंकिंग600
8.0
AA
सामान्य रैंकिंग565
22.0
AA
मल्टीमॉडल रैंकिंग119
38.0
LS
विज्ञान600
17.0
AA

बेंचमार्क स्कोर (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.9%स्वयं

Factuality

SimpleQA6.3%स्वयं

General

Global-MMLU-Lite69.5%स्वयं

Language

MMLU-Pro60.6%स्वयं
WMT24++51.6%स्वयं
ECLeKTic10.3%स्वयं

Math

GSM8k94.4%स्वयं
MATH83.8%स्वयं
MathVista-Mini62.9%स्वयं
HiddenMath54.5%स्वयं

Reasoning

BIG-Bench Hard85.7%स्वयं
HumanEvalOpenAI (2021)85.4%स्वयं
Natural2Code80.7%स्वयं
FACTS Grounding75.8%स्वयं
ChartQAMasry et al. (2022)75.7%स्वयं
MBPP0.73 / 100स्वयं
Bird-SQL (dev)47.9%स्वयं
GPQANYU + Cohere + Anthropic (2023)40.9%स्वयं
LiveCodeBench24.6%स्वयं
BIG-Bench Extra Hard16.3%स्वयं

Vision

DocVQADocVQA (2020)87.1%स्वयं
AI2D84.2%स्वयं
VQAv2 (val)71.6%स्वयं
TextVQA67.7%स्वयं
InfoVQA64.9%स्वयं
MMMU (val)59.6%स्वयं

AA मूल्यांकन सूचकांक

(Artificial Analysis)
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
85.3
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
59.5
Ifbench(Google Research (2023))
36.7
Gpqa(NYU + Cohere + Anthropic (2023))
34.9
Aime(MAA (Mathematical Association of America))
22.0
Aime 25(MAA (Mathematical Association of America))
18.3
Math Index(Artificial Analysis)
18.3
Scicode(UIUC + Argonne National Lab (2024))
16.4
Livecodebench(UC Berkeley + MIT + Cornell (2024))
13.7
Tau2(Sierra + U Toronto + Vector Institute (2025))
10.8
Lcr(Artificial Analysis)
8.3
Coding Index(Artificial Analysis)
5.8
Hle(Center for AI Safety + Scale AI (2025))
4.2
Intelligence Index(Artificial Analysis)
3.8
Tau Banking
0.8
Terminalbench Hard(Stanford × Laude Institute (2026))
0.8
Terminalbench V2 1
0.0
Terminalbench V4 0
0.0

LLM Stats श्रेणी स्कोर

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Code
60
Language
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

मूल्य निर्धारण

इनपुट मूल्यमुफ्त
आउटपुट मूल्यमुफ्त
मिश्रित मूल्य (3:1)मुफ्त

गति

टोकन/सेकंड0.0
पहले टोकन में देरी0.00s
पहले उत्तर में देरी0.00s

प्रदाता मूल्य रैंकिंग

प्रदाता मूल्य रैंकिंग

2 प्रदाता

सबसे सस्ता: DeepInfraसबसे महंगा: Neon
प्रदाताइनपुटआउटपुट
1DeepInfraसबसे सस्ता
$0
$0
2Neon
$0.15
$0.5

इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।

बाहरी लिंक

LLM StatsArtificial Analysis