Gemini 1.5 Flash (Sep '24)

GoogleGeminiProprietary

描述

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

發布日期

2024-09-24

參數規模

—

上下文長度

—

支援模態

image, text

能力雷達圖

general

coding

reasoning

science估算

agents

multimodal

Science 在缺少專門科學評測時使用推理能力代理估算。

排行榜排名

領域	#排名	分數	來源
代码能力榜	268	30.0	AA
通用能力榜	316	35.0	AA
数学推理	180	51.0	AA
多模态榜	39	76.0	LS
推理能力	16	87.0	LS
科学能力	350	31.0	AA

基準測試分數 (LLM Stats)

Biology

GPQA

51.0%自報

Code

HumanEval

74.3%自報

Finance

MMLU

78.9%自報

MMLU-Pro

67.3%自報

General

Natural2Code

79.8%自報

MRCR

71.9%自報

MMMU

62.3%自報

Vibe-Eval

48.9%自報

Healthcare

WMT23

74.1%自報

Language

BIG-Bench Hard

85.5%自報

FLEURS

0.10 / 100自報

Math

GSM8k

86.2%自報

MGSM

82.6%自報

MATH

77.9%自報

MathVista

65.8%自報

PhysicsFinals

57.4%自報

FunctionalMATH

53.6%自報

HiddenMath

47.2%自報

AMC_2022_23

34.8%自報

Multimodal

Video-MME

76.1%自報

Reasoning

HellaSwag

86.5%自報

Safety

XSTest

97.0%自報

AA 評測指數

Intelligence Index

13.8

Math 500

0.8

Mmlu Pro

0.7

Gpqa

0.5

Livecodebench

0.3

Scicode

0.3

Aime

0.2

Hle

0.0

LLM Stats 分類評分

Safety

100

Code

Finance

General

Healthcare

Legal

Long Context

Math

Reasoning

Vision

Language

Multimodal

Biology

Chemistry

Physics

Speech To Text

定價

輸入價格免費

輸出價格免費

混合價格(3:1)免費

速度

Tokens/秒0.0 tokens/s

首Token延遲0.00s

首回答延遲0.00s

可用提供商

(LS 內部計價單位)

暫無提供商資料

外部連結

LLM Stats