Перейти к основному содержанию

Gemma 3 12B Instruct

GoogleGemmaОткрытые весаGemma · Коммерческое использование

Описание

Gemma 3 12B is a 12-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Дата выхода
2025-03-12
Параметры
12.0B
Длина контекста
131K
Модальности
image, text

Радар способностей

60
general
60
coding
70
reasoning
34
scienceоцен.
67
agents
80
multimodal

При отсутствии специализированных научных бенчмарков Science оценивается по научным категориям LLM Stats или на основе рассуждений.

Рейтинги

Домен#МестоОценкаИсточник
Мультимодальный рейтинг107
40.0
LS

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.9%Сам.

Factuality

SimpleQA6.3%Сам.

General

Global-MMLU-Lite69.5%Сам.

Language

MMLU-Pro60.6%Сам.
WMT24++51.6%Сам.
ECLeKTic10.3%Сам.

Math

GSM8k94.4%Сам.
MATH83.8%Сам.
MathVista-Mini62.9%Сам.
HiddenMath54.5%Сам.

Reasoning

BIG-Bench Hard85.7%Сам.
HumanEvalOpenAI (2021)85.4%Сам.
Natural2Code80.7%Сам.
FACTS Grounding75.8%Сам.
ChartQAMasry et al. (2022)75.7%Сам.
MBPP0.73 / 100Сам.
Bird-SQL (dev)47.9%Сам.
GPQANYU + Cohere + Anthropic (2023)40.9%Сам.
LiveCodeBench24.6%Сам.
BIG-Bench Extra Hard16.3%Сам.

Vision

DocVQADocVQA (2020)87.1%Сам.
AI2D84.2%Сам.
VQAv2 (val)71.6%Сам.
TextVQA67.7%Сам.
InfoVQA64.9%Сам.
MMMU (val)59.6%Сам.

Индексы оценки AA

(Artificial Analysis)

Нет данных AA оценки

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Structured Output
90
Image To Text
80
Grounding
80
Math
70
Multimodal
70
Vision
70
Legal
60
Reasoning
60
Finance
60
General
60
Healthcare
60
Code
60
Language
50
Physics
40
Factuality
40
Biology
40
Chemistry
40

Цены

Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)$0.075 / 1M токенов

Скорость

Нет данных о скорости

Рейтинг цен провайдеров

Рейтинг цен провайдеров

2 провайдеров

Самый дешевый: DeepInfraСамый дорогой: Neon
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0.05
$0.15
2Neon
$0.15
$0.5

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки