跳轉到主要內容

Gemini 1.5 Pro (Sep '24)

GoogleGeminiProprietary

描述

Gemini 1.5 Pro is a mid-size multimodal model optimized for a wide range of reasoning tasks. It can process large amounts of data at once, including 2 hours of video, 19 hours of audio, codebases with 60,000 lines of code, or 2,000 pages of text.

發布日期
2024-09-24
參數規模
—
上下文長度
—
支援模態
image, text

能力雷達圖

80
general
80
coding
80
reasoning
51
science估算
80
agents
80
multimodal

缺少專門科學評測時,Science 由 LLM Stats 科學得分或推理能力估算。

排行榜排名

領域#排名分數來源
多模態榜82
49.0
LS

基準測試分數 (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU85.9%自報

Language

FLEURS93.3%自報
MMLU-Pro75.8%自報
WMT2375.1%自報

Long Context

MRCR82.6%自報

Math

GSM8k90.8%自報
MGSM87.5%自報
MATH86.5%自報
MathVista68.1%自報
FunctionalMATH64.6%自報
HiddenMath52.0%自報
AMC_2022_2346.4%自報

Multimodal

Video-MME78.6%自報
MMMU65.9%自報
Vibe-Eval53.9%自報

Physics

PhysicsFinals63.9%自報

Reasoning

HellaSwagAI2 (2019)93.3%自報
BIG-Bench Hard89.2%自報
Natural2Code85.4%自報
HumanEvalOpenAI (2021)84.1%自報
DROP74.9%自報
GPQANYU + Cohere + Anthropic (2023)59.1%自報

Safety

XSTest98.8%自報

AA 評測指數

(Artificial Analysis)

暫無 AA 評測資料

LLM Stats 分類評分

(LLM Stats (zeroeval))
Safety
100
Speech To Text
90
Language
80
Legal
80
Long Context
80
Math
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Code
80
Multimodal
70
Vision
70
Physics
60
Biology
60
Chemistry
60

定價

暫無定價資料

速度

暫無速度資料

供應商價格排行

暫無提供商資料

外部連結