Gemma 3 12B Instruct
GoogleGemmaОткрытые весаGemma · Коммерческое использование
Описание
Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.
Дата выхода
2025-03-12
Параметры
12.0B
Длина контекста
131K
Модальности
image, text
Радар способностей
60
general
60
coding
70
reasoning
34
scienceоцен.
67
agents
80
multimodal
При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Мультимодальный рейтинг | 107 | 40.0 | LS |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.9%Сам.
Factuality
SimpleQA
6.3%Сам.
General
Global-MMLU-Lite
69.5%Сам.
Language
MMLU-Pro
60.6%Сам.
WMT24++
51.6%Сам.
ECLeKTic
10.3%Сам.
Math
GSM8k
94.4%Сам.
MATH
83.8%Сам.
MathVista-Mini
62.9%Сам.
HiddenMath
54.5%Сам.
Reasoning
BIG-Bench Hard
85.7%Сам.
HumanEvalOpenAI (2021)
85.4%Сам.
Natural2Code
80.7%Сам.
FACTS Grounding
75.8%Сам.
ChartQAMasry et al. (2022)
75.7%Сам.
MBPP
0.73 / 100Сам.
Bird-SQL (dev)
47.9%Сам.
GPQANYU + Cohere + Anthropic (2023)
40.9%Сам.
LiveCodeBench
24.6%Сам.
BIG-Bench Extra Hard
16.3%Сам.
Vision
DocVQADocVQA (2020)
87.1%Сам.
AI2D
84.2%Сам.
VQAv2 (val)
71.6%Сам.
TextVQA
67.7%Сам.
InfoVQA
64.9%Сам.
MMMU (val)
59.6%Сам.
Индексы оценки AA
(Artificial Analysis)Нет данных AA оценки
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Image To Text80
Grounding80
Math70
Multimodal70
Vision70
Legal60
Reasoning60
Finance60
General60
Healthcare60
Code60
Language50
Physics40
Factuality40
Biology40
Chemistry40
Цены
Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)$0.075 / 1M токенов
Скорость
Нет данных о скорости
Рейтинг цен провайдеров
Рейтинг цен провайдеров
2 провайдеров
Самый дешевый: DeepInfraСамый дорогой: Neon
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0.05
$0.15
2Neon
$0.15
$0.5
Сравнение цен разных API-провайдеров для этой модели.