Gemini 1.5 Flash (Sep '24)
GoogleGeminiProprietary
설명
Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.
출시일
2024-09-24
파라미터
—
컨텍스트 길이
—
모달리티
image, text
능력 레이더
29
general
27
coding
43
reasoning
31
science추정
0
agents
80
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Code Ranking | 268 | 30.0 | AA |
| General Ranking | 316 | 35.0 | AA |
| Math Reasoning | 180 | 51.0 | AA |
| Multimodal Ranking | 39 | 76.0 | LS |
| Reasoning | 16 | 87.0 | LS |
| Science | 350 | 31.0 | AA |
벤치마크 점수 (LLM Stats)
Biology
GPQA
51.0%자체 보고
Code
HumanEval
74.3%자체 보고
Finance
MMLU
78.9%자체 보고
MMLU-Pro
67.3%자체 보고
General
Natural2Code
79.8%자체 보고
MRCR
71.9%자체 보고
MMMU
62.3%자체 보고
Vibe-Eval
48.9%자체 보고
Healthcare
WMT23
74.1%자체 보고
Language
BIG-Bench Hard
85.5%자체 보고
FLEURS
0.10 / 100자체 보고
Math
GSM8k
86.2%자체 보고
MGSM
82.6%자체 보고
MATH
77.9%자체 보고
MathVista
65.8%자체 보고
PhysicsFinals
57.4%자체 보고
FunctionalMATH
53.6%자체 보고
HiddenMath
47.2%자체 보고
AMC_2022_23
34.8%자체 보고
Multimodal
Video-MME
76.1%자체 보고
Reasoning
HellaSwag
86.5%자체 보고
Safety
XSTest
97.0%자체 보고
AA 평가 지수
Intelligence Index13.8
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Livecodebench0.3
Scicode0.3
Aime0.2
Hle0.0
LLM Stats 카테고리 점수
Safety100
Code70
Finance70
General70
Healthcare70
Legal70
Long Context70
Math70
Reasoning70
Vision60
Language60
Multimodal60
Biology50
Chemistry50
Physics50
Speech To Text10
가격
입력 가격무료
출력 가격무료
혼합 가격 (3:1)무료
속도
토큰/초0.0 tokens/s
첫 토큰 지연0.00s
첫 응답 지연0.00s
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다