Llama 3.2 Instruct 11B (Vision)
MetaLlamaओपन वेटLlama 3.2 Community License
विवरण
Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.
रिलीज़ तिथि
2024-09-25
पैरामीटर
10.6B
संदर्भ लंबाई
—
मोडैलिटीज़
image, text
क्षमता रडार
18
general
11
coding
13
reasoning
17
science
12
agents
90
multimodal
रैंकिंग
| डोमेन | #रैंक | स्कोर | स्रोत |
|---|---|---|---|
| कोडिंग रैंकिंग | 599 | 9.0 | AA |
| सामान्य रैंकिंग | 588 | 20.0 | AA |
| मल्टीमॉडल रैंकिंग | 124 | 37.0 | LS |
| विज्ञान | 651 | 11.0 | AA |
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))General
MMLU
73.0%स्वयं
Math
MGSM
68.9%स्वयं
MATH
51.9%स्वयं
MathVista
51.5%स्वयं
Multimodal
MMMU
50.7%स्वयं
Reasoning
ChartQAMasry et al. (2022)
83.4%स्वयं
GPQANYU + Cohere + Anthropic (2023)
32.8%स्वयं
Vision
AI2D
91.1%स्वयं
DocVQADocVQA (2020)
88.4%स्वयं
VQAv2 (test)
75.2%स्वयं
MMMU-Pro
33.0%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))51.6
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))46.4
Ifbench(Google Research (2023))30.4
Gpqa(NYU + Cohere + Anthropic (2023))22.1
Tau2(Sierra + U Toronto + Vector Institute (2025))14.6
Lcr(Artificial Analysis)12.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))11.0
Aime(MAA (Mathematical Association of America))9.3
Hle(Center for AI Safety + Scale AI (2025))5.5
Intelligence Index(Artificial Analysis)5.4
Math Index(Artificial Analysis)1.7
Aime 25(MAA (Mathematical Association of America))1.7
Terminalbench Hard(Stanford × Laude Institute (2026))0.8
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Image To Text90
Language70
Legal70
Multimodal70
Finance70
Vision70
Math60
Reasoning60
General60
Healthcare60
Physics30
Biology30
Chemistry30
मूल्य निर्धारण
इनपुट मूल्य$0.345 / 1M टोकन
आउटपुट मूल्य$0.345 / 1M टोकन
मिश्रित मूल्य (3:1)$0.345 / 1M टोकन
गति
टोकन/सेकंड13.7
पहले टोकन में देरी1.37s
पहले उत्तर में देरी1.37s
प्रदाता मूल्य रैंकिंग
प्रदाता मूल्य रैंकिंग
1 प्रदाता
प्रदाताइनपुटआउटपुट
1Metaप्राथमिक
$0.345
$0.345
इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।