Llama 3.2 Instruct 11B (Vision)
MetaLlamaオープンウエイトLlama 3.2 Community License
説明
Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.
リリース日
2024-09-25
パラメータ
10.6B
コンテキスト長
—
モダリティ
image, text
能力レーダー
16
general
11
coding
13
reasoning
15
science
12
agents
90
multimodal
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 487 | 11.0 | AA |
| 総合ランキング | 508 | 19.0 | AA |
| マルチモーダルランキング | 30 | 55.0 | LS |
| 科学 | 527 | 14.0 | AA |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
32.8%自己申告
Finance
MMLU
73.0%自己申告
General
MMMU
50.7%自己申告
MMMU-Pro
33.0%自己申告
Image To Text
DocVQADocVQA (2020)
88.4%自己申告
VQAv2 (test)
75.2%自己申告
Math
MGSM
68.9%自己申告
MATH
51.9%自己申告
MathVista
51.5%自己申告
Multimodal
AI2D
91.1%自己申告
ChartQAMasry et al. (2022)
83.4%自己申告
AA評価指数
(Artificial Analysis)Intelligence Index(Artificial Analysis)3.0
Math Index(Artificial Analysis)1.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.5
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.5
Ifbench(Google Research (2023))0.3
Gpqa(NYU + Cohere + Anthropic (2023))0.2
Lcr(Artificial Analysis)0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Scicode(UIUC + Argonne National Lab (2024))0.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.1
Aime(MAA (Mathematical Association of America))0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Aime 25(MAA (Mathematical Association of America))0.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Image To Text90
Legal70
Multimodal70
Language70
Finance70
Vision70
Math60
Reasoning60
General60
Healthcare60
Physics30
Biology30
Chemistry30
価格設定
入力価格$0.345 / 1Mトークン
出力価格$0.345 / 1Mトークン
混合価格(3:1)$0.345 / 1Mトークン
速度
トークン/秒17.2
初トークン遅延0.70s
初回答遅延0.70s
プロバイダー価格ランキング
プロバイダー価格ランキング
1 プロバイダー
プロバイダー入力出力
1Metaプライマリ
$0.345
$0.345
このモデルの異なるAPIプロバイダー間の価格を比較。