メインコンテンツへスキップ
AITier

Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

説明

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

リリース日
2024-09-24
パラメータ
—
コンテキスト長
—
モダリティ
image, text

能力レーダー

29
general
27
coding
43
reasoning
31
science推定
0
agents
80
multimodal

専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。

ランキング

ドメイン#順位スコアソース
Code Ranking268
30.0
AA
General Ranking316
35.0
AA
Math Reasoning180
51.0
AA
Multimodal Ranking39
76.0
LS
Reasoning16
87.0
LS
Science350
31.0
AA

ベンチマークスコア (LLM Stats)

Biology

GPQA51.0%自己申告

Code

HumanEval74.3%自己申告

Finance

MMLU78.9%自己申告
MMLU-Pro67.3%自己申告

General

Natural2Code79.8%自己申告
MRCR71.9%自己申告
MMMU62.3%自己申告
Vibe-Eval48.9%自己申告

Healthcare

WMT2374.1%自己申告

Language

BIG-Bench Hard85.5%自己申告
FLEURS0.10 / 100自己申告

Math

GSM8k86.2%自己申告
MGSM82.6%自己申告
MATH77.9%自己申告
MathVista65.8%自己申告
PhysicsFinals57.4%自己申告
FunctionalMATH53.6%自己申告
HiddenMath47.2%自己申告
AMC_2022_2334.8%自己申告

Multimodal

Video-MME76.1%自己申告

Reasoning

HellaSwag86.5%自己申告

Safety

XSTest97.0%自己申告

AA評価指数

Intelligence Index
13.8
Math 500
0.8
Mmlu Pro
0.7
Gpqa
0.5
Livecodebench
0.3
Scicode
0.3
Aime
0.2
Hle
0.0

LLM Statsカテゴリスコア

Safety
100
Code
70
Finance
70
General
70
Healthcare
70
Legal
70
Long Context
70
Math
70
Reasoning
70
Vision
60
Language
60
Multimodal
60
Biology
50
Chemistry
50
Physics
50
Speech To Text
10

価格設定

入力価格無料
出力価格無料
混合価格（3:1）無料

速度

トークン/秒0.0 tokens/s
初トークン遅延0.00s
初回答遅延0.00s

利用可能なプロバイダー

(LS内部単位)

プロバイダーデータがありません

外部リンク

LLM Stats