Saltar al contenido principal

Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

Descripción

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

Fecha de lanzamiento
2024-09-24
Parámetros
—
Longitud del contexto
—
Modalidades
image, text

Radar de capacidades

70
general
70
coding
70
reasoning
43
scienceest.
70
agents
80
multimodal

Science se estima a partir de las puntuaciones científicas de LLM Stats o del razonamiento cuando no hay benchmarks científicos dedicados.

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking multimodal93
46.0
LS

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU78.9%Aut.

Language

FLEURS90.4%Aut.
WMT2374.1%Aut.
MMLU-Pro67.3%Aut.

Long Context

MRCR71.9%Aut.

Math

GSM8k86.2%Aut.
MGSM82.6%Aut.
MATH77.9%Aut.
MathVista65.8%Aut.
FunctionalMATH53.6%Aut.
HiddenMath47.2%Aut.
AMC_2022_2334.8%Aut.

Multimodal

Video-MME76.1%Aut.
MMMU62.3%Aut.
Vibe-Eval48.9%Aut.

Physics

PhysicsFinals57.4%Aut.

Reasoning

HellaSwagAI2 (2019)86.5%Aut.
BIG-Bench Hard85.5%Aut.
Natural2Code79.8%Aut.
HumanEvalOpenAI (2021)74.3%Aut.
GPQANYU + Cohere + Anthropic (2023)51.0%Aut.

Safety

XSTest97.0%Aut.

Índices de evaluación AA

(Artificial Analysis)

No hay datos de evaluación AA disponibles

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Safety
100
Speech To Text
90
Language
80
Legal
70
Long Context
70
Math
70
Reasoning
70
Finance
70
General
70
Healthcare
70
Code
70
Multimodal
60
Vision
60
Physics
50
Biology
50
Chemistry
50

Precios

No hay datos de precios disponibles

Velocidad

No hay datos de velocidad disponibles

Ranking de Precios por Proveedor

No hay datos de proveedores disponibles

Fuentes externas