मुख्य सामग्री पर जाएं
AITier

Gemma 3 27B Instruct

GoogleGemmaOpen WeightGemma · Commercial OK

विवरण

Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.

रिलीज़ तिथि
2025-03-12
पैरामीटर
27.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
image, text

क्षमता रडार

26
general
12
coding
34
reasoning
28
scienceअनुमानित
0
agents
70
multimodal

समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।

रैंकिंग

डोमेन#रैंकस्कोरस्रोत
Code Ranking410
12.0
AA
General Ranking396
26.0
AA
Math Reasoning248
35.0
AA
Multimodal Ranking40
76.0
LS
Reasoning79
54.0
LS
Science376
28.0
AA

बेंचमार्क स्कोर (LLM Stats)

Biology

GPQA42.4%स्वयं

Code

HumanEval87.8%स्वयं
LiveCodeBench29.7%स्वयं

Factuality

FACTS Grounding74.9%स्वयं
SimpleQA10.0%स्वयं

Finance

MMLU-Pro67.5%स्वयं

General

IFEval90.4%स्वयं
Natural2Code84.5%स्वयं
Global-MMLU-Lite75.1%स्वयं
MBPP0.74 / 100स्वयं
MMMU (val)64.9%स्वयं
BIG-Bench Extra Hard19.3%स्वयं

Image To Text

DocVQA86.6%स्वयं
VQAv2 (val)71.0%स्वयं
TextVQA65.1%स्वयं

Language

BIG-Bench Hard87.6%स्वयं
WMT24++53.4%स्वयं
ECLeKTic16.7%स्वयं

Math

GSM8k95.9%स्वयं
MATH89.0%स्वयं
MathVista-Mini67.6%स्वयं
HiddenMath60.3%स्वयं

Multimodal

AI2D84.5%स्वयं
ChartQA78.0%स्वयं
InfoVQA70.6%स्वयं

Reasoning

Bird-SQL (dev)54.4%स्वयं

AA मूल्यांकन सूचकांक

Math Index
20.7
Intelligence Index
10.3
Coding Index
9.6
Math 500
0.9
Mmlu Pro
0.7
Gpqa
0.4
Ifbench
0.3
Aime
0.3
Scicode
0.2
Aime 25
0.2
Livecodebench
0.1
Tau2
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Stats श्रेणी स्कोर

Structured Output
90
Instruction Following
90
Math
80
Vision
70
Finance
70
Grounding
70
Healthcare
70
Image To Text
70
Legal
70
Multimodal
70
Code
60
General
60
Language
60
Reasoning
60
Biology
40
Chemistry
40
Factuality
40
Physics
40

मूल्य निर्धारण

इनपुट मूल्य$0.11 / 1M tokens
आउटपुट मूल्य$0.25 / 1M tokens
मिश्रित मूल्य (3:1)$0.145 / 1M tokens

गति

टोकन/सेकंड31.4 tokens/s
पहले टोकन में देरी0.73s
पहले उत्तर में देरी0.73s

उपलब्ध प्रदाता

(LS आंतरिक इकाइयाँ)

कोई प्रदाता डेटा उपलब्ध नहीं

बाहरी लिंक

LLM Stats