Llama 3.2 Instruct 11B (Vision)
MetaLlamaОткрытые весаLlama 3.2 Community License
Описание
Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.
Дата выхода
2024-09-25
Параметры
10.6B
Длина контекста
—
Модальности
image, text
Радар способностей
18
general
11
coding
13
reasoning
17
science
12
agents
90
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 596 | 9.0 | AA |
| Общий рейтинг | 585 | 20.0 | AA |
| Мультимодальный рейтинг | 124 | 37.0 | LS |
| Наука | 648 | 11.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))General
MMLU
73.0%Сам.
Math
MGSM
68.9%Сам.
MATH
51.9%Сам.
MathVista
51.5%Сам.
Multimodal
MMMU
50.7%Сам.
Reasoning
ChartQAMasry et al. (2022)
83.4%Сам.
GPQANYU + Cohere + Anthropic (2023)
32.8%Сам.
Vision
AI2D
91.1%Сам.
DocVQADocVQA (2020)
88.4%Сам.
VQAv2 (test)
75.2%Сам.
MMMU-Pro
33.0%Сам.
Индексы оценки AA
(Artificial Analysis)Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))51.6
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))46.4
Ifbench(Google Research (2023))30.4
Gpqa(NYU + Cohere + Anthropic (2023))22.1
Tau2(Sierra + U Toronto + Vector Institute (2025))14.6
Lcr(Artificial Analysis)12.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))11.0
Aime(MAA (Mathematical Association of America))9.3
Hle(Center for AI Safety + Scale AI (2025))5.5
Intelligence Index(Artificial Analysis)5.4
Math Index(Artificial Analysis)1.7
Aime 25(MAA (Mathematical Association of America))1.7
Terminalbench Hard(Stanford × Laude Institute (2026))0.8
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Image To Text90
Language70
Legal70
Multimodal70
Finance70
Vision70
Math60
Reasoning60
General60
Healthcare60
Physics30
Biology30
Chemistry30
Цены
Цена ввода$0.345 / 1M токенов
Цена вывода$0.345 / 1M токенов
Смешанная цена (3:1)$0.345 / 1M токенов
Скорость
Токенов/сек15.1
Задержка первого токена1.54s
Время до первого ответа1.54s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1MetaОсновной
$0.345
$0.345
Сравнение цен разных API-провайдеров для этой модели.