Gemma 3 27B Instruct
GoogleGemmaओपन वेटGemma · व्यावसायिक उपयोग
विवरण
Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.
रिलीज़ तिथि
2025-03-12
पैरामीटर
27.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
image, text
क्षमता रडार
23
general
13
coding
34
reasoning
28
science
28
agents
70
multimodal
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 577 | 11.0 | AA |
| सामान्य रैंकिंग | 548 | 24.0 | AA |
| मल्टीमॉडल रैंकिंग | 109 | 41.0 | LS |
| विज्ञान | 549 | 23.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
90.4%स्वयं
Factuality
SimpleQA
10.0%स्वयं
General
Global-MMLU-Lite
75.1%स्वयं
Language
MMLU-Pro
67.5%स्वयं
WMT24++
53.4%स्वयं
ECLeKTic
16.7%स्वयं
Long Context
MRCR v2 (8-needle)
13.5%स्वयं
Math
GSM8k
95.9%स्वयं
MATH
89.0%स्वयं
MathVista-Mini
67.6%स्वयं
HiddenMath
60.3%स्वयं
Reasoning
HumanEvalOpenAI (2021)
87.8%स्वयं
BIG-Bench Hard
87.6%स्वयं
Natural2Code
84.5%स्वयं
ChartQAMasry et al. (2022)
78.0%स्वयं
FACTS Grounding
74.9%स्वयं
MBPP
0.74 / 100स्वयं
Bird-SQL (dev)
54.4%स्वयं
GPQANYU + Cohere + Anthropic (2023)
42.4%स्वयं
LiveCodeBench
29.7%स्वयं
BIG-Bench Extra Hard
19.3%स्वयं
Vision
DocVQADocVQA (2020)
86.6%स्वयं
AI2D
84.5%स्वयं
VQAv2 (val)
71.0%स्वयं
InfoVQA
70.6%स्वयं
TextVQA
65.1%स्वयं
MMMU (val)
64.9%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))88.3
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))66.9
Gpqa(NYU + Cohere + Anthropic (2023))42.8
Ifbench(Google Research (2023))31.8
Aime(MAA (Mathematical Association of America))25.3
Scicode(UIUC + Argonne National Lab (2024))23.3
Math Index(Artificial Analysis)20.7
Aime 25(MAA (Mathematical Association of America))20.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))13.7
Tau2(Sierra + U Toronto + Vector Institute (2025))10.5
Coding Index(Artificial Analysis)10.1
Lcr(Artificial Analysis)7.3
Intelligence Index(Artificial Analysis)4.9
Terminalbench V2 14.5
Hle(Center for AI Safety + Scale AI (2025))4.4
Terminalbench Hard(Stanford × Laude Institute (2026))3.8
Tau Banking0.8
Terminalbench V4 00.0
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Math80
Image To Text70
Legal70
Multimodal70
Finance70
Grounding70
Healthcare70
Vision70
Language60
Reasoning60
General60
Code60
Physics40
Factuality40
Biology40
Chemistry40
Long Context10
मूल्य निर्धारण
इनपुट मूल्यमुफ्त
आउटपुट मूल्यमुफ्त
मिश्रित मूल्य (3:1)मुफ्त
कैश पठन मूल्य$0.04 / 1M टोकन
गति
टोकन/सेकंड0.0
पहले टोकन में देरी0.00s
पहले उत्तर में देरी0.00s
प्रदाता मूल्य रैंकिंग
प्रदाता मूल्य रैंकिंग
9 प्रदाता
सबसे सस्ता: DeepInfraसबसे महंगा: STACKIT
प्रदाताइनपुटआउटपुट
1DeepInfraसबसे सस्ता
$0
$0
2OpenRouter
$0.08
$0.45
3Hugging Face
$0.08
$0.16
4Deep Infra
$0.08
$0.16
5Kilo Gateway
$0.08
$0.16
6Merge Gateway
$0.08
$0.45
7Nebius Token Factory
$0.1
$0.3
8NovitaAI
$0.119
$0.2
9STACKIT
$0.53
$0.76
इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।