跳轉到主要內容

Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

描述

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

發布日期
2024-09-24
參數規模
上下文長度
支援模態
image, text

能力雷達圖

25
general
27
coding
43
reasoning
31
science估算
38
agents
80
multimodal

Science 在缺少專門科學評測時使用推理能力代理估算。

排行榜排名

領域#排名分數來源
程式碼能力榜290
30.0
AA
通用能力榜334
33.0
AA
數學推理180
51.0
AA
科學能力376
30.0
AA

基準測試分數 (LLM Stats)

Biology

GPQA51.0%自報

Code

HumanEval74.3%自報

Finance

MMLU78.9%自報
MMLU-Pro67.3%自報

General

Natural2Code79.8%自報
MRCR71.9%自報
MMMU62.3%自報
Vibe-Eval48.9%自報

Healthcare

WMT2374.1%自報

Language

FLEURS90.4%自報
BIG-Bench Hard85.5%自報

Math

GSM8k86.2%自報
MGSM82.6%自報
MATH77.9%自報
MathVista65.8%自報
PhysicsFinals57.4%自報
FunctionalMATH53.6%自報
HiddenMath47.2%自報
AMC_2022_2334.8%自報

Multimodal

Video-MME76.1%自報

Reasoning

HellaSwag86.5%自報

Safety

XSTest97.0%自報

AA 評測指數

Intelligence Index
8.0
Math 500
0.8
Mmlu Pro
0.7
Gpqa
0.5
Livecodebench
0.3
Scicode
0.3
Aime
0.2
Hle
0.0

LLM Stats 分類評分

Safety
100
Speech To Text
90
Language
80
Legal
70
Long Context
70
Math
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Code
70
Multimodal
60
Vision
60
Physics
50
Biology
50
Chemistry
50

定價

輸入價格免費
輸出價格免費
混合價格(3:1)免費

速度

Tokens/秒0.0
首Token延遲0.00s
首回答延遲0.00s

供應商價格排行

暫無提供商資料

外部連結