メインコンテンツへスキップ

Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

説明

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

リリース日
2024-09-24
パラメータ
—
コンテキスト長
—
モダリティ
image, text

能力レーダー

70
general
70
coding
70
reasoning
43
science推定
70
agents
80
multimodal

専用の科学ベンチマークがない場合、Science は LLM Stats の科学スコアまたは推論能力から推定します。

ランキング

ドメイン#順位スコアソース
マルチモーダルランキング93
46.0
LS

ベンチマークスコア (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU78.9%自己申告

Language

FLEURS90.4%自己申告
WMT2374.1%自己申告
MMLU-Pro67.3%自己申告

Long Context

MRCR71.9%自己申告

Math

GSM8k86.2%自己申告
MGSM82.6%自己申告
MATH77.9%自己申告
MathVista65.8%自己申告
FunctionalMATH53.6%自己申告
HiddenMath47.2%自己申告
AMC_2022_2334.8%自己申告

Multimodal

Video-MME76.1%自己申告
MMMU62.3%自己申告
Vibe-Eval48.9%自己申告

Physics

PhysicsFinals57.4%自己申告

Reasoning

HellaSwagAI2 (2019)86.5%自己申告
BIG-Bench Hard85.5%自己申告
Natural2Code79.8%自己申告
HumanEvalOpenAI (2021)74.3%自己申告
GPQANYU + Cohere + Anthropic (2023)51.0%自己申告

Safety

XSTest97.0%自己申告

AA評価指数

(Artificial Analysis)

AA評価データがありません

LLM Statsカテゴリスコア

(LLM Stats (zeroeval))
Safety
100
Speech To Text
90
Language
80
Legal
70
Long Context
70
Math
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Code
70
Multimodal
60
Vision
60
Physics
50
Biology
50
Chemistry
50

価格設定

価格データがありません

速度

速度データがありません

プロバイダー価格ランキング

プロバイダーデータがありません

外部リンク