Gemma 3 27B Instruct
GoogleGemmaオープンウエイトGemma · 商用利用可
説明
Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.
リリース日
2025-03-12
パラメータ
27.0B
コンテキスト長
131K
モダリティ
image, text
能力レーダー
23
general
13
coding
34
reasoning
28
science
28
agents
70
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 568 | 11.0 | AA |
| 総合ランキング | 540 | 24.0 | AA |
| マルチモーダルランキング | 108 | 41.0 | LS |
| 科学 | 540 | 23.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
90.4%自己申告
Factuality
SimpleQA
10.0%自己申告
General
Global-MMLU-Lite
75.1%自己申告
Language
MMLU-Pro
67.5%自己申告
WMT24++
53.4%自己申告
ECLeKTic
16.7%自己申告
Long Context
MRCR v2 (8-needle)
13.5%自己申告
Math
GSM8k
95.9%自己申告
MATH
89.0%自己申告
MathVista-Mini
67.6%自己申告
HiddenMath
60.3%自己申告
Reasoning
HumanEvalOpenAI (2021)
87.8%自己申告
BIG-Bench Hard
87.6%自己申告
Natural2Code
84.5%自己申告
ChartQAMasry et al. (2022)
78.0%自己申告
FACTS Grounding
74.9%自己申告
MBPP
0.74 / 100自己申告
Bird-SQL (dev)
54.4%自己申告
GPQANYU + Cohere + Anthropic (2023)
42.4%自己申告
LiveCodeBench
29.7%自己申告
BIG-Bench Extra Hard
19.3%自己申告
Vision
DocVQADocVQA (2020)
86.6%自己申告
AI2D
84.5%自己申告
VQAv2 (val)
71.0%自己申告
InfoVQA
70.6%自己申告
TextVQA
65.1%自己申告
MMMU (val)
64.9%自己申告
AA評価指数
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))88.3
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))66.9
Gpqa(NYU + Cohere + Anthropic (2023))42.8
Ifbench(Google Research (2023))31.8
Aime(MAA (Mathematical Association of America))25.3
Scicode(UIUC + Argonne National Lab (2024))23.3
Math Index(Artificial Analysis)20.7
Aime 25(MAA (Mathematical Association of America))20.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))13.7
Tau2(Sierra + U Toronto + Vector Institute (2025))10.5
Coding Index(Artificial Analysis)10.1
Lcr(Artificial Analysis)7.3
Intelligence Index(Artificial Analysis)4.9
Terminalbench V2 14.5
Hle(Center for AI Safety + Scale AI (2025))4.4
Terminalbench Hard(Stanford × Laude Institute (2026))3.8
Tau Banking0.8
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Math80
Image To Text70
Legal70
Multimodal70
Finance70
Grounding70
Healthcare70
Vision70
Language60
Reasoning60
General60
Code60
Physics40
Factuality40
Biology40
Chemistry40
Long Context10
価格設定
入力価格無料
出力価格無料
混合価格（3:1）無料
キャッシュ読み取り価格$0.04 / 1Mトークン
速度
トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s
プロバイダー価格ランキング
プロバイダー価格ランキング
9 プロバイダー
最安: DeepInfra最高: STACKIT
プロバイダー入力出力
1DeepInfra最安
$0
$0
2OpenRouter
$0.08
$0.45
3Hugging Face
$0.08
$0.16
4Deep Infra
$0.08
$0.16
5Kilo Gateway
$0.08
$0.16
6Merge Gateway
$0.08
$0.45
7Nebius Token Factory
$0.1
$0.3
8NovitaAI
$0.119
$0.2
9STACKIT
$0.53
$0.76
このモデルの異なるAPIプロバイダー間の価格を比較。