Перейти к основному содержанию

Gemma 3 4B Instruct

GoogleGemmaОткрытые весаGemma · Коммерческое использование

Описание

Gemma 3 4B is a 4-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Дата выхода
2025-03-12
Параметры
4.0B
Длина контекста
131K
Модальности
image, text

Радар способностей

14
general
6
coding
22
reasoning
17
science
17
agents
70
multimodal

Рейтинги

Домен#МестоОценкаИсточник
Рейтинг кодинга533
5.0
AA
Общий рейтинг550
14.0
AA
Мультимодальный рейтинг70
36.0
LS
Наука543
14.0
AA

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)30.8%Сам.

Code

HumanEvalOpenAI (2021)71.3%Сам.
LiveCodeBench12.6%Сам.

Factuality

FACTS Grounding70.1%Сам.
SimpleQA4.0%Сам.

Finance

MMLU-Pro43.6%Сам.

General

IFEvalGoogle Research (2023)90.2%Сам.
Natural2Code70.3%Сам.
MBPP0.63 / 100Сам.
Global-MMLU-Lite54.5%Сам.
MMMU (val)48.8%Сам.
BIG-Bench Extra Hard11.0%Сам.

Image To Text

DocVQADocVQA (2020)75.8%Сам.
VQAv2 (val)62.4%Сам.
TextVQA57.8%Сам.

Language

BIG-Bench Hard72.2%Сам.
WMT24++46.8%Сам.
ECLeKTic4.6%Сам.

Math

GSM8k89.2%Сам.
MATH75.6%Сам.
MathVista-Mini50.0%Сам.
HiddenMath43.0%Сам.

Multimodal

AI2D74.8%Сам.
ChartQAMasry et al. (2022)68.8%Сам.
InfoVQA50.0%Сам.

Reasoning

Bird-SQL (dev)36.3%Сам.

Индексы оценки AA

(Artificial Analysis)
Math Index(Artificial Analysis)
12.7
Coding Index(Artificial Analysis)
2.7
Intelligence Index(Artificial Analysis)
1.0
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.4
Gpqa(NYU + Cohere + Anthropic (2023))
0.3
Ifbench(Google Research (2023))
0.3
Aime 25(MAA (Mathematical Association of America))
0.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.1
Scicode(UIUC + Argonne National Lab (2024))
0.1
Lcr(Artificial Analysis)
0.1
Aime(MAA (Mathematical Association of America))
0.1
Hle(Center for AI Safety + Scale AI (2025))
0.1
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0
Tau Banking
0.0
Terminalbench V2 1
0.0

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Structured Output
90
Instruction Following
90
Image To Text
70
Grounding
70
Math
60
Multimodal
60
Vision
60
Reasoning
50
General
50
Healthcare
50
Legal
40
Language
40
Factuality
40
Finance
40
Code
40
Physics
30
Biology
30
Chemistry
30

Цены

Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно

Скорость

Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

2 провайдеров

Самый дешевый: OpenRouterСамый дорогой: Kilo Gateway
ПровайдерВводВывод
1OpenRouterСамый дешевый
$0.05
$0.1
2Kilo Gateway
$0.05
$0.1

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки