Перейти к основному содержанию

Gemma 3 4B Instruct

GoogleGemmaОткрытые весаGemma · Коммерческое использование

Описание

Gemma 3 4B is a 4-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for question answering, summarization, reasoning, and image understanding tasks.

Дата выхода
2025-03-12
Параметры
4.0B
Длина контекста
131K
Модальности
image, text

Радар способностей

14
general
10
coding
22
reasoning
17
scienceоцен.
18
agents
70
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Оценки бенчмарков (LLM Stats)

Biology

GPQA30.8%Сам.

Code

HumanEval71.3%Сам.
LiveCodeBench12.6%Сам.

Factuality

FACTS Grounding70.1%Сам.
SimpleQA4.0%Сам.

Finance

MMLU-Pro43.6%Сам.

General

IFEval90.2%Сам.
Natural2Code70.3%Сам.
MBPP0.63 / 100Сам.
Global-MMLU-Lite54.5%Сам.
MMMU (val)48.8%Сам.
BIG-Bench Extra Hard11.0%Сам.

Image To Text

DocVQA75.8%Сам.
VQAv2 (val)62.4%Сам.
TextVQA57.8%Сам.

Language

BIG-Bench Hard72.2%Сам.
WMT24++46.8%Сам.
ECLeKTic4.6%Сам.

Math

GSM8k89.2%Сам.
MATH75.6%Сам.
MathVista-Mini50.0%Сам.
HiddenMath43.0%Сам.

Multimodal

AI2D74.8%Сам.
ChartQA68.8%Сам.
InfoVQA50.0%Сам.

Reasoning

Bird-SQL (dev)36.3%Сам.

Индексы оценки AA

Math Index
12.7
Intelligence Index
1.1
Math 500
0.8
Mmlu Pro
0.4
Gpqa
0.3
Ifbench
0.3
Aime 25
0.1
Livecodebench
0.1
Scicode
0.1
Aime
0.1
Lcr
0.1
Hle
0.1
Tau2
0.0
Terminalbench Hard
0.0

Оценки категорий LLM Stats

Instruction Following
90
Structured Output
90
Image To Text
70
Grounding
70
Math
60
Multimodal
60
Vision
60
Reasoning
50
Healthcare
50
Language
40
Legal
40
Factuality
40
Finance
40
General
40
Code
40
Physics
30
Biology
30
Chemistry
30

Цены

Цена ввода$0.04 / 1M токенов
Цена вывода$0.08 / 1M токенов
Смешанная цена (3:1)$0.05 / 1M токенов

Скорость

Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

6 провайдеров

Самый дешевый: ChutesСамый дорогой: NanoGPT
ПровайдерВводВывод
1ChutesСамый дешевый
$0.01
$0.0272
2GoogleОсновной
$0.04
$0.08
3Kilo Gateway
$0.04
$0.08
4Amazon Bedrock
$0.04
$0.08
5OpenRouter
$0.05
$0.1
6NanoGPT
$0.2006
$0.2006

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки