メインコンテンツへスキップ

Gemma 3 12B Instruct

GoogleGemmaオープンウエイトGemma · 商用利用可

説明

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

リリース日
2025-03-12
パラメータ
12.0B
コンテキスト長
131K
モダリティ
image, text

能力レーダー

20
general
15
coding
31
reasoning
23
science推定
26
agents
80
multimodal

専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。

ランキング

ドメイン#順位スコアソース
コーディングランキング459
8.0
AA
総合ランキング421
24.0
AA
数学的推論253
33.0
AA
マルチモーダルランキング46
76.0
LS
推論96
48.0
LS
科学431
22.0
AA

ベンチマークスコア (LLM Stats)

Biology

GPQA40.9%自己申告

Code

HumanEval85.4%自己申告
LiveCodeBench24.6%自己申告

Factuality

FACTS Grounding75.8%自己申告
SimpleQA6.3%自己申告

Finance

MMLU-Pro60.6%自己申告

General

IFEval88.9%自己申告
Natural2Code80.7%自己申告
MBPP0.73 / 100自己申告
Global-MMLU-Lite69.5%自己申告
MMMU (val)59.6%自己申告
BIG-Bench Extra Hard16.3%自己申告

Image To Text

DocVQA87.1%自己申告
VQAv2 (val)71.6%自己申告
TextVQA67.7%自己申告

Language

BIG-Bench Hard85.7%自己申告
WMT24++51.6%自己申告
ECLeKTic10.3%自己申告

Math

GSM8k94.4%自己申告
MATH83.8%自己申告
MathVista-Mini62.9%自己申告
HiddenMath54.5%自己申告

Multimodal

AI2D84.2%自己申告
ChartQA75.7%自己申告
InfoVQA64.9%自己申告

Reasoning

Bird-SQL (dev)47.9%自己申告

AA評価指数

Math Index
18.3
Intelligence Index
3.4
Math 500
0.9
Mmlu Pro
0.6
Ifbench
0.4
Gpqa
0.3
Aime
0.2
Aime 25
0.2
Scicode
0.2
Livecodebench
0.1
Tau2
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Statsカテゴリスコア

Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
Healthcare
60
Code
60
Language
50
General
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

価格設定

入力価格$0.09 / 1Mトークン
出力価格$0.29 / 1Mトークン
混合価格(3:1)$0.14 / 1Mトークン

速度

トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s

プロバイダー価格ランキング

プロバイダー価格ランキング

6 プロバイダー

最安: Chutes最高: Cloudflare AI Gateway
プロバイダー入力出力
1Chutes最安
$0.03
$0.1
2Helicone
$0.05
$0.1
3Amazon Bedrock
$0.05
$0.1
4Googleプライマリ
$0.09
$0.29
5NanoGPT
$0.272
$0.272
6Cloudflare AI Gateway
$0.35
$0.56

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク