Gemini 1.5 Flash (May '24)

GoogleGemini

설명

Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.

출시일

2024-05-14

파라미터

—

컨텍스트 길이

—

모달리티

—

능력 레이더

general

coding

reasoning

science추정

agents

multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인	#순위	점수	소스
코딩 랭킹	357	21.0	AA
종합 랭킹	410	25.0	AA
수학 추론	257	32.0	AA
멀티모달 랭킹	44	76.0	LS
추론	16	87.0	LS
과학	437	21.0	AA

벤치마크 점수 (LLM Stats)

Biology

GPQA

51.0%자체 보고

Code

HumanEval

74.3%자체 보고

Finance

MMLU

78.9%자체 보고

MMLU-Pro

67.3%자체 보고

General

Natural2Code

79.8%자체 보고

MRCR

71.9%자체 보고

MMMU

62.3%자체 보고

Vibe-Eval

48.9%자체 보고

Healthcare

WMT23

74.1%자체 보고

Language

FLEURS

90.4%자체 보고

BIG-Bench Hard

85.5%자체 보고

Math

GSM8k

86.2%자체 보고

MGSM

82.6%자체 보고

MATH

77.9%자체 보고

MathVista

65.8%자체 보고

PhysicsFinals

57.4%자체 보고

FunctionalMATH

53.6%자체 보고

HiddenMath

47.2%자체 보고

AMC_2022_23

34.8%자체 보고

Multimodal

Video-MME

76.1%자체 보고

Reasoning

HellaSwag

86.5%자체 보고

Safety

XSTest

97.0%자체 보고

AA 평가 지수

Intelligence Index

4.9

Mmlu Pro

0.6

Math 500

0.6

Gpqa

0.3

Livecodebench

0.2

Scicode

0.2

Aime

0.1

Hle

0.0

LLM Stats 카테고리 점수

Safety

100

Speech To Text

Language

Legal

Long Context

Math

Reasoning

Finance

General

Healthcare

Code

Multimodal

Vision

Physics

Biology

Chemistry

가격

입력 가격무료

출력 가격무료

혼합 가격 (3:1)무료

속도

토큰/초0.0

첫 토큰 지연0.00s

첫 응답 지연0.00s

공급자 가격 순위

프로바이더 데이터가 없습니다

외부 링크

Artificial Analysis