Llama 3.2 Instruct 11B (Vision)
MetaLlamaОткрытые весаLlama 3.2 Community License
Описание
Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.
Дата выхода
2024-09-25
Параметры
10.6B
Длина контекста
—
Модальности
image, text
Радар способностей
16
general
11
coding
13
reasoning
15
science
12
agents
90
multimodal
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 486 | 11.0 | AA |
| Общий рейтинг | 507 | 19.0 | AA |
| Мультимодальный рейтинг | 30 | 55.0 | LS |
| Наука | 526 | 14.0 | AA |
Оценки бенчмарков (LLM Stats)
(LLM Stats (zeroeval))Biology
GPQANYU + Cohere + Anthropic (2023)
32.8%Сам.
Finance
MMLU
73.0%Сам.
General
MMMU
50.7%Сам.
MMMU-Pro
33.0%Сам.
Image To Text
DocVQADocVQA (2020)
88.4%Сам.
VQAv2 (test)
75.2%Сам.
Math
MGSM
68.9%Сам.
MATH
51.9%Сам.
MathVista
51.5%Сам.
Multimodal
AI2D
91.1%Сам.
ChartQAMasry et al. (2022)
83.4%Сам.
Индексы оценки AA
(Artificial Analysis)Intelligence Index(Artificial Analysis)3.0
Math Index(Artificial Analysis)1.7
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))0.5
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))0.5
Ifbench(Google Research (2023))0.3
Gpqa(NYU + Cohere + Anthropic (2023))0.2
Lcr(Artificial Analysis)0.2
Tau2(Sierra + U Toronto + Vector Institute (2025))0.1
Scicode(UIUC + Argonne National Lab (2024))0.1
Livecodebench(UC Berkeley + MIT + Cornell (2024))0.1
Aime(MAA (Mathematical Association of America))0.1
Hle(Center for AI Safety + Scale AI (2025))0.1
Aime 25(MAA (Mathematical Association of America))0.0
Terminalbench Hard(Stanford × Laude Institute (2026))0.0
Оценки категорий LLM Stats
(LLM Stats (zeroeval))Image To Text90
Language70
Legal70
Multimodal70
Finance70
Vision70
Math60
Reasoning60
General60
Healthcare60
Physics30
Biology30
Chemistry30
Цены
Цена ввода$0.345 / 1M токенов
Цена вывода$0.345 / 1M токенов
Смешанная цена (3:1)$0.345 / 1M токенов
Скорость
Токенов/сек17.4
Задержка первого токена0.70s
Время до первого ответа0.70s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
1 провайдеров
ПровайдерВводВывод
1MetaОсновной
$0.345
$0.345
Сравнение цен разных API-провайдеров для этой модели.