Gemma 3 12B Instruct
GoogleGemmaОткрытые весаGemma · Коммерческое использование
Описание
Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.
Дата выхода
2025-03-12
Параметры
12.0B
Длина контекста
131K
Модальности
image, text
Радар способностей
20
general
15
coding
31
reasoning
23
scienceоцен.
26
agents
80
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 459 | 8.0 | AA |
| Общий рейтинг | 421 | 24.0 | AA |
| Математическое мышление | 253 | 33.0 | AA |
| Мультимодальный рейтинг | 46 | 76.0 | LS |
| Рассуждения | 96 | 48.0 | LS |
| Наука | 431 | 22.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
40.9%Сам.
Code
HumanEval
85.4%Сам.
LiveCodeBench
24.6%Сам.
Factuality
FACTS Grounding
75.8%Сам.
SimpleQA
6.3%Сам.
Finance
MMLU-Pro
60.6%Сам.
General
IFEval
88.9%Сам.
Natural2Code
80.7%Сам.
MBPP
0.73 / 100Сам.
Global-MMLU-Lite
69.5%Сам.
MMMU (val)
59.6%Сам.
BIG-Bench Extra Hard
16.3%Сам.
Image To Text
DocVQA
87.1%Сам.
VQAv2 (val)
71.6%Сам.
TextVQA
67.7%Сам.
Language
BIG-Bench Hard
85.7%Сам.
WMT24++
51.6%Сам.
ECLeKTic
10.3%Сам.
Math
GSM8k
94.4%Сам.
MATH
83.8%Сам.
MathVista-Mini
62.9%Сам.
HiddenMath
54.5%Сам.
Multimodal
AI2D
84.2%Сам.
ChartQA
75.7%Сам.
InfoVQA
64.9%Сам.
Reasoning
Bird-SQL (dev)
47.9%Сам.
Индексы оценки AA
Math Index18.3
Intelligence Index3.4
Math 5000.9
Mmlu Pro0.6
Ifbench0.4
Gpqa0.3
Aime0.2
Aime 250.2
Scicode0.2
Livecodebench0.1
Tau20.1
Lcr0.1
Hle0.0
Terminalbench Hard0.0
Оценки категорий LLM Stats
Instruction Following90
Structured Output90
Image To Text80
Grounding80
Math70
Multimodal70
Vision70
Legal60
Reasoning60
Finance60
Healthcare60
Code60
Language50
General50
Physics40
Factuality40
Biology40
Chemistry40
Цены
Цена ввода$0.09 / 1M токенов
Цена вывода$0.29 / 1M токенов
Смешанная цена (3:1)$0.14 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
6 провайдеров
Самый дешевый: ChutesСамый дорогой: Cloudflare AI Gateway
ПровайдерВводВывод
1ChutesСамый дешевый
$0.03
$0.1
2Helicone
$0.05
$0.1
3Amazon Bedrock
$0.05
$0.1
4GoogleОсновной
$0.09
$0.29
5NanoGPT
$0.272
$0.272
6Cloudflare AI Gateway
$0.35
$0.56
Сравнение цен разных API-провайдеров для этой модели.