Passer au contenu principal

Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

Description

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

Date de sortie
2024-09-24
Paramètres
—
Longueur du contexte
—
Modalités
image, text

Radar de capacités

70
general
70
coding
70
reasoning
43
scienceest.
70
agents
80
multimodal

Science est estimé à partir des scores scientifiques de LLM Stats ou du raisonnement lorsque les benchmarks scientifiques dédiés ne sont pas disponibles.

Classements

Domaine#RangScoreSource
Classement multimodal93
46.0
LS

Scores de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU78.9%Aut.

Language

FLEURS90.4%Aut.
WMT2374.1%Aut.
MMLU-Pro67.3%Aut.

Long Context

MRCR71.9%Aut.

Math

GSM8k86.2%Aut.
MGSM82.6%Aut.
MATH77.9%Aut.
MathVista65.8%Aut.
FunctionalMATH53.6%Aut.
HiddenMath47.2%Aut.
AMC_2022_2334.8%Aut.

Multimodal

Video-MME76.1%Aut.
MMMU62.3%Aut.
Vibe-Eval48.9%Aut.

Physics

PhysicsFinals57.4%Aut.

Reasoning

HellaSwagAI2 (2019)86.5%Aut.
BIG-Bench Hard85.5%Aut.
Natural2Code79.8%Aut.
HumanEvalOpenAI (2021)74.3%Aut.
GPQANYU + Cohere + Anthropic (2023)51.0%Aut.

Safety

XSTest97.0%Aut.

Indices d'évaluation AA

(Artificial Analysis)

Aucune donnée d'évaluation AA disponible

Scores par catégorie LLM Stats

(LLM Stats (zeroeval))
Safety
100
Speech To Text
90
Language
80
Legal
70
Long Context
70
Math
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Code
70
Multimodal
60
Vision
60
Physics
50
Biology
50
Chemistry
50

Tarification

Aucune donnée de prix disponible

Vitesse

Aucune donnée de vitesse disponible

Classement des Prix par Fournisseur

Aucune donnée de fournisseur disponible

Sources externes