메인 콘텐츠로 건너뛰기

Gemma 3 12B Instruct

GoogleGemma오픈 웨이트Gemma · 상업적 사용 가능

설명

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

출시일
2025-03-12
파라미터
12.0B
컨텍스트 길이
131K
모달리티
image, text

능력 레이더

20
general
15
coding
31
reasoning
23
science추정
26
agents
80
multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인#순위점수소스
코딩 랭킹459
8.0
AA
종합 랭킹421
24.0
AA
수학 추론253
33.0
AA
멀티모달 랭킹46
76.0
LS
추론96
48.0
LS
과학431
22.0
AA

벤치마크 점수 (LLM Stats)

Biology

GPQA40.9%자체 보고

Code

HumanEval85.4%자체 보고
LiveCodeBench24.6%자체 보고

Factuality

FACTS Grounding75.8%자체 보고
SimpleQA6.3%자체 보고

Finance

MMLU-Pro60.6%자체 보고

General

IFEval88.9%자체 보고
Natural2Code80.7%자체 보고
MBPP0.73 / 100자체 보고
Global-MMLU-Lite69.5%자체 보고
MMMU (val)59.6%자체 보고
BIG-Bench Extra Hard16.3%자체 보고

Image To Text

DocVQA87.1%자체 보고
VQAv2 (val)71.6%자체 보고
TextVQA67.7%자체 보고

Language

BIG-Bench Hard85.7%자체 보고
WMT24++51.6%자체 보고
ECLeKTic10.3%자체 보고

Math

GSM8k94.4%자체 보고
MATH83.8%자체 보고
MathVista-Mini62.9%자체 보고
HiddenMath54.5%자체 보고

Multimodal

AI2D84.2%자체 보고
ChartQA75.7%자체 보고
InfoVQA64.9%자체 보고

Reasoning

Bird-SQL (dev)47.9%자체 보고

AA 평가 지수

Math Index
18.3
Intelligence Index
3.4
Math 500
0.9
Mmlu Pro
0.6
Ifbench
0.4
Gpqa
0.3
Aime
0.2
Aime 25
0.2
Scicode
0.2
Livecodebench
0.1
Tau2
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Stats 카테고리 점수

Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
Healthcare
60
Code
60
Language
50
General
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

가격

입력 가격$0.09 / 1M 토큰
출력 가격$0.29 / 1M 토큰
혼합 가격 (3:1)$0.14 / 1M 토큰

속도

토큰/초0.0
첫 토큰 지연0.00s
첫 응답 지연0.00s

공급자 가격 순위

공급자 가격 순위

6개 공급자

최저가: Chutes최고가: Cloudflare AI Gateway
공급자입력출력
1Chutes최저가
$0.03
$0.1
2Helicone
$0.05
$0.1
3Amazon Bedrock
$0.05
$0.1
4Google주요
$0.09
$0.29
5NanoGPT
$0.272
$0.272
6Cloudflare AI Gateway
$0.35
$0.56

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크