Gemini 1.5 Flash (Sep '24)
GoogleGeminiProprietary
विवरण
Gemini 1.5 Flash is a fast and versatile multimodal model for scaling across diverse tasks. It supports audio, images, video, and text input, and produces text output. The model is optimized for generating code, extracting data, editing text, and more, making it ideal for narrow, high-frequency tasks.
रिलीज़ तिथि
2024-09-24
पैरामीटर
—
संदर्भ लंबाई
—
मोडैलिटीज़
image, text
क्षमता रडार
25
general
27
coding
43
reasoning
31
science
38
agents
80
multimodal
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 340 | 30.0 | AA |
| सामान्य रैंकिंग | 392 | 32.0 | AA |
| मल्टीमॉडल रैंकिंग | 46 | 46.0 | LS |
| विज्ञान | 424 | 30.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
51.0%स्वयं
Code
HumanEvalOpenAI (2021)
74.3%स्वयं
Finance
MMLU
78.9%स्वयं
MMLU-Pro
67.3%स्वयं
General
Natural2Code
79.8%स्वयं
MRCR
71.9%स्वयं
MMMU
62.3%स्वयं
Vibe-Eval
48.9%स्वयं
Healthcare
WMT23
74.1%स्वयं
Language
FLEURS
90.4%स्वयं
BIG-Bench Hard
85.5%स्वयं
Math
GSM8k
86.2%स्वयं
MGSM
82.6%स्वयं
MATH
77.9%स्वयं
MathVista
65.8%स्वयं
PhysicsFinals
57.4%स्वयं
FunctionalMATH
53.6%स्वयं
HiddenMath
47.2%स्वयं
AMC_2022_23
34.8%स्वयं
Multimodal
Video-MME
76.1%स्वयं
Reasoning
HellaSwagAI2 (2019)
86.5%स्वयं
Safety
XSTest
97.0%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)Intelligence Index(Artificial Analysis)7.8
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.8
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.7
Gpqa(NYU + Cohere + Anthropic (2023))0.5
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.3
Scicode(UIUC + Argonne National Lab (2024))0.3
Aime(MAA (Mathematical Association of America))0.2
Hle(Center for AI Safety + Scale AI (2025))0.0
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Safety100
Speech To Text90
Language80
Legal70
Long Context70
Math70
Reasoning70
Finance70
General70
Healthcare70
Code70
Multimodal60
Vision60
Physics50
Biology50
Chemistry50
मूल्य निर्धारण
इनपुट मूल्यमुफ्त
आउटपुट मूल्यमुफ्त
मिश्रित मूल्य (3:1)मुफ्त
गति
टोकन/सेकंड0.0
पहले टोकन में देरी0.00s
पहले उत्तर में देरी0.00s
प्रदाता मूल्य रैंकिंग
कोई प्रदाता डेटा उपलब्ध नहीं