Перейти к основному содержанию

Gemma 3 27B Instruct

GoogleGemmaОткрытые весаGemma · Коммерческое использование

Описание

Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.

Дата выхода
2025-03-12
Параметры
27.0B
Длина контекста
262K
Модальности
image, text

Радар способностей

25
general
12
coding
34
reasoning
28
science
27
agents
70
multimodal

Рейтинги

Домен#МестоОценкаИсточник
Рейтинг кодинга495
11.0
AA
Общий рейтинг464
26.0
AA
Мультимодальный рейтинг54
44.0
LS
Наука461
27.0
AA

Оценки бенчмарков (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)42.4%Сам.

Code

HumanEvalOpenAI (2021)87.8%Сам.
LiveCodeBench29.7%Сам.

Factuality

FACTS Grounding74.9%Сам.
SimpleQA10.0%Сам.

Finance

MMLU-Pro67.5%Сам.

General

IFEvalGoogle Research (2023)90.4%Сам.
Natural2Code84.5%Сам.
Global-MMLU-Lite75.1%Сам.
MBPP0.74 / 100Сам.
MMMU (val)64.9%Сам.
BIG-Bench Extra Hard19.3%Сам.
MRCR v2 (8-needle)13.5%Сам.

Image To Text

DocVQADocVQA (2020)86.6%Сам.
VQAv2 (val)71.0%Сам.
TextVQA65.1%Сам.

Language

BIG-Bench Hard87.6%Сам.
WMT24++53.4%Сам.
ECLeKTic16.7%Сам.

Math

GSM8k95.9%Сам.
MATH89.0%Сам.
MathVista-Mini67.6%Сам.
HiddenMath60.3%Сам.

Multimodal

AI2D84.5%Сам.
ChartQAMasry et al. (2022)78.0%Сам.
InfoVQA70.6%Сам.

Reasoning

Bird-SQL (dev)54.4%Сам.

Индексы оценки AA

(Artificial Analysis)
Math Index(Artificial Analysis)
20.7
Coding Index(Artificial Analysis)
10.1
Intelligence Index(Artificial Analysis)
7.4
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
0.9
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
0.7
Gpqa(NYU + Cohere + Anthropic (2023))
0.4
Ifbench(Google Research (2023))
0.3
Aime(MAA (Mathematical Association of America))
0.3
Scicode(UIUC + Argonne National Lab (2024))
0.2
Aime 25(MAA (Mathematical Association of America))
0.2
Livecodebench(UC Berkeley + MIT + Cornell (2024))
0.1
Tau2(Sierra + U Toronto + Vector Institute (2025))
0.1
Lcr(Artificial Analysis)
0.1
Terminalbench V2 1
0.0
Hle(Center for AI Safety + Scale AI (2025))
0.0
Terminalbench Hard(Stanford × Laude Institute (2026))
0.0
Tau Banking
0.0

Оценки категорий LLM Stats

(LLM Stats (zeroeval))
Structured Output
90
Instruction Following
90
Math
80
Legal
70
Multimodal
70
Image To Text
70
Finance
70
Grounding
70
Healthcare
70
Vision
70
Reasoning
60
Language
60
General
60
Code
60
Physics
40
Factuality
40
Biology
40
Chemistry
40
Long Context
10

Цены

Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно
Цена чтения кэша$0.04 / 1M токенов

Скорость

Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s

Рейтинг цен провайдеров

Рейтинг цен провайдеров

6 провайдеров

Самый дешевый: OpenRouterСамый дорогой: STACKIT
ПровайдерВводВывод
1OpenRouterСамый дешевый
$0.08
$0.45
2Kilo Gateway
$0.08
$0.16
3Nebius Token Factory
$0.1
$0.3
4LLM Gateway
$0.1
$0.3
5NovitaAI
$0.119
$0.2
6STACKIT
$0.53
$0.76

Сравнение цен разных API-провайдеров для этой модели.

Внешние ссылки