Gemma 3 12B Instruct

GoogleGemma오픈 웨이트Gemma · 상업적 사용 가능

설명

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

출시일

2025-03-12

파라미터

12.0B

컨텍스트 길이

131K

모달리티

image, text

능력 레이더

general

coding

reasoning

science

agents

multimodal

랭킹

도메인	#순위	점수	소스
코딩 랭킹	519	8.0	AA
종합 랭킹	474	25.0	AA
멀티모달 랭킹	57	43.0	LS
과학	501	21.0	AA

벤치마크 점수 (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)

40.9%자체 보고

Code

HumanEvalOpenAI (2021)

85.4%자체 보고

LiveCodeBench

24.6%자체 보고

Factuality

FACTS Grounding

75.8%자체 보고

SimpleQA

6.3%자체 보고

Finance

MMLU-Pro

60.6%자체 보고

General

IFEvalGoogle Research (2023)

88.9%자체 보고

Natural2Code

80.7%자체 보고

MBPP

0.73 / 100자체 보고

Global-MMLU-Lite

69.5%자체 보고

MMMU (val)

59.6%자체 보고

BIG-Bench Extra Hard

16.3%자체 보고

Image To Text

DocVQADocVQA (2020)

87.1%자체 보고

VQAv2 (val)

71.6%자체 보고

TextVQA

67.7%자체 보고

Language

BIG-Bench Hard

85.7%자체 보고

WMT24++

51.6%자체 보고

ECLeKTic

10.3%자체 보고

Math

GSM8k

94.4%자체 보고

MATH

83.8%자체 보고

MathVista-Mini

62.9%자체 보고

HiddenMath

54.5%자체 보고

Multimodal

AI2D

84.2%자체 보고

ChartQAMasry et al. (2022)

75.7%자체 보고

InfoVQA

64.9%자체 보고

Reasoning

Bird-SQL (dev)

47.9%자체 보고

AA 평가 지수

(Artificial Analysis)

Math Index(Artificial Analysis)

18.3

Coding Index(Artificial Analysis)

5.8

Intelligence Index(Artificial Analysis)

5.5

Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))

0.9

Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))

0.6

Ifbench(Google Research (2023))

0.4

Gpqa(NYU + Cohere + Anthropic (2023))

0.3

Aime(MAA (Mathematical Association of America))

0.2

Aime 25(MAA (Mathematical Association of America))

0.2

Scicode(UIUC + Argonne National Lab (2024))

0.2

Livecodebench(UC Berkeley + MIT + Cornell (2024))

0.1

Tau2(Sierra + U Toronto + Vector Institute (2025))

0.1

Lcr(Artificial Analysis)

0.1

Hle(Center for AI Safety + Scale AI (2025))

0.0

Tau Banking

0.0

Terminalbench Hard(Stanford × Laude Institute (2026))

0.0

Terminalbench V2 1

0.0

LLM Stats 카테고리 점수

(LLM Stats (zeroeval))

Structured Output

Instruction Following

Image To Text

Grounding

Math

Multimodal

Vision

Legal

Reasoning

Finance

General

Healthcare

Code

Language

Physics

Factuality

Biology

Chemistry

가격

입력 가격무료

출력 가격무료

혼합 가격 (3:1)무료

속도

토큰/초0.0

첫 토큰 지연0.00s

첫 응답 지연0.00s

공급자 가격 순위

1개 공급자

공급자입력출력

1Neon

$0.15

$0.5

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크

LLM Stats Artificial Analysis