跳轉到主要內容

Gemma 3 27B Instruct

GoogleGemmaOpen WeightGemma · Commercial OK

描述

Gemma 3 27B is a 27-billion-parameter vision-language model from Google, handling text and image input and generating text output. It features a 128K context window, multilingual support, and open weights. Suitable for complex question answering, summarization, reasoning, and image understanding tasks.

發布日期
2025-03-12
參數規模
27.0B
上下文長度
131K
支援模態
image, text

能力雷達圖

26
general
12
coding
34
reasoning
28
science估算
0
agents
70
multimodal

Science 在缺少專門科學評測時使用推理能力代理估算。

排行榜排名

領域#排名分數來源
代码能力榜410
12.0
AA
通用能力榜396
26.0
AA
数学推理248
35.0
AA
多模态榜40
76.0
LS
推理能力79
54.0
LS
科学能力376
28.0
AA

基準測試分數 (LLM Stats)

Biology

GPQA42.4%自報

Code

HumanEval87.8%自報
LiveCodeBench29.7%自報

Factuality

FACTS Grounding74.9%自報
SimpleQA10.0%自報

Finance

MMLU-Pro67.5%自報

General

IFEval90.4%自報
Natural2Code84.5%自報
Global-MMLU-Lite75.1%自報
MBPP0.74 / 100自報
MMMU (val)64.9%自報
BIG-Bench Extra Hard19.3%自報

Image To Text

DocVQA86.6%自報
VQAv2 (val)71.0%自報
TextVQA65.1%自報

Language

BIG-Bench Hard87.6%自報
WMT24++53.4%自報
ECLeKTic16.7%自報

Math

GSM8k95.9%自報
MATH89.0%自報
MathVista-Mini67.6%自報
HiddenMath60.3%自報

Multimodal

AI2D84.5%自報
ChartQA78.0%自報
InfoVQA70.6%自報

Reasoning

Bird-SQL (dev)54.4%自報

AA 評測指數

Math Index
20.7
Intelligence Index
10.3
Coding Index
9.6
Math 500
0.9
Mmlu Pro
0.7
Gpqa
0.4
Ifbench
0.3
Aime
0.3
Scicode
0.2
Aime 25
0.2
Livecodebench
0.1
Tau2
0.1
Lcr
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Stats 分類評分

Structured Output
90
Instruction Following
90
Math
80
Vision
70
Finance
70
Grounding
70
Healthcare
70
Image To Text
70
Legal
70
Multimodal
70
Code
60
General
60
Language
60
Reasoning
60
Biology
40
Chemistry
40
Factuality
40
Physics
40

定價

輸入價格$0.11 / 1M tokens
輸出價格$0.25 / 1M tokens
混合價格(3:1)$0.145 / 1M tokens

速度

Tokens/秒31.4 tokens/s
首Token延遲0.73s
首回答延遲0.73s

可用提供商

(LS 內部計價單位)

暫無提供商資料

外部連結