Gemma 3 27B Instruct
GoogleGemmaОткрытые весаGemma · Коммерческое использование
Описание
Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.
Дата выхода
2025-03-12
Параметры
27.0B
Длина контекста
131K
Модальности
image, text
Радар способностей
23
general
13
coding
34
reasoning
28
science
28
agents
70
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 568 | 11.0 | AA |
| Общий рейтинг | 540 | 24.0 | AA |
| Мультимодальный рейтинг | 108 | 41.0 | LS |
| Наука | 540 | 23.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
90.4%Сам.
Factuality
SimpleQA
10.0%Сам.
General
Global-MMLU-Lite
75.1%Сам.
Language
MMLU-Pro
67.5%Сам.
WMT24++
53.4%Сам.
ECLeKTic
16.7%Сам.
Long Context
MRCR v2 (8-needle)
13.5%Сам.
Math
GSM8k
95.9%Сам.
MATH
89.0%Сам.
MathVista-Mini
67.6%Сам.
HiddenMath
60.3%Сам.
Reasoning
HumanEvalOpenAI (2021)
87.8%Сам.
BIG-Bench Hard
87.6%Сам.
Natural2Code
84.5%Сам.
ChartQAMasry et al. (2022)
78.0%Сам.
FACTS Grounding
74.9%Сам.
MBPP
0.74 / 100Сам.
Bird-SQL (dev)
54.4%Сам.
GPQANYU + Cohere + Anthropic (2023)
42.4%Сам.
LiveCodeBench
29.7%Сам.
BIG-Bench Extra Hard
19.3%Сам.
Vision
DocVQADocVQA (2020)
86.6%Сам.
AI2D
84.5%Сам.
VQAv2 (val)
71.0%Сам.
InfoVQA
70.6%Сам.
TextVQA
65.1%Сам.
MMMU (val)
64.9%Сам.
Индексы оценки AA
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))88.3
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))66.9
Gpqa(NYU + Cohere + Anthropic (2023))42.8
Ifbench(Google Research (2023))31.8
Aime(MAA (Mathematical Association of America))25.3
Scicode(UIUC + Argonne National Lab (2024))23.3
Math Index(Artificial Analysis)20.7
Aime 25(MAA (Mathematical Association of America))20.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))13.7
Tau2(Sierra + U Toronto + Vector Institute (2025))10.5
Coding Index(Artificial Analysis)10.1
Lcr(Artificial Analysis)7.3
Intelligence Index(Artificial Analysis)4.9
Terminalbench V2 14.5
Hle(Center for AI Safety + Scale AI (2025))4.4
Terminalbench Hard(Stanford × Laude Institute (2026))3.8
Tau Banking0.8
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Chat90
Instruction Following90
Structured Output90
Math80
Image To Text70
Legal70
Multimodal70
Finance70
Grounding70
Healthcare70
Vision70
Language60
Reasoning60
General60
Code60
Physics40
Factuality40
Biology40
Chemistry40
Long Context10
Цены
Цена вводаБесплатно
Цена выводаБесплатно
Смешанная цена (3:1)Бесплатно
Цена чтения кэша$0.04 / 1M токенов
Скорость
Токенов/сек0.0
Задержка первого токена0.00s
Время до первого ответа0.00s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
9 провайдеров
Самый дешевый: DeepInfraСамый дорогой: STACKIT
ПровайдерВводВывод
1DeepInfraСамый дешевый
$0
$0
2OpenRouter
$0.08
$0.45
3Hugging Face
$0.08
$0.16
4Deep Infra
$0.08
$0.16
5Kilo Gateway
$0.08
$0.16
6Merge Gateway
$0.08
$0.45
7Nebius Token Factory
$0.1
$0.3
8NovitaAI
$0.119
$0.2
9STACKIT
$0.53
$0.76
Сравнение цен разных API-провайдеров для этой модели.