Llama 3.2 Instruct 11B (Vision)
MetaLlamaОткрытые весаLlama 3.2 Community License
Описание
Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.
Дата выхода
2024-09-25
Параметры
10.6B
Длина контекста
131K
Модальности
image, text
Радар способностей
17
general
11
coding
13
reasoning
15
scienceоцен.
12
agents
90
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Рейтинг кодинга | 453 | 9.0 | AA |
| Общий рейтинг | 451 | 20.0 | AA |
| Математическое мышление | 328 | 13.0 | AA |
| Мультимодальный рейтинг | 26 | 84.0 | LS |
| Наука | 474 | 14.0 | AA |
Оценки бенчмарков (LLM Stats)
Biology
GPQA
32.8%Сам.
Finance
MMLU
73.0%Сам.
General
MMMU
50.7%Сам.
MMMU-Pro
33.0%Сам.
Image To Text
DocVQA
88.4%Сам.
VQAv2 (test)
75.2%Сам.
Math
MGSM
68.9%Сам.
MATH
51.9%Сам.
MathVista
51.5%Сам.
Multimodal
AI2D
91.1%Сам.
ChartQA
83.4%Сам.
Индексы оценки AA
Intelligence Index3.3
Math Index1.7
Math 5000.5
Mmlu Pro0.5
Ifbench0.3
Gpqa0.2
Tau20.1
Lcr0.1
Scicode0.1
Livecodebench0.1
Aime0.1
Hle0.1
Aime 250.0
Terminalbench Hard0.0
Оценки категорий LLM Stats
Image To Text90
Language70
Legal70
Multimodal70
Finance70
Vision70
Math60
Reasoning60
Healthcare60
General50
Physics30
Biology30
Chemistry30
Цены
Цена ввода$0.245 / 1M токенов
Цена вывода$0.245 / 1M токенов
Смешанная цена (3:1)$0.245 / 1M токенов
Скорость
Токенов/сек85.7
Задержка первого токена0.55s
Время до первого ответа0.55s
Рейтинг цен провайдеров
Рейтинг цен провайдеров
10 провайдеров
Самый дешевый: Cloudflare Workers AIСамый дорогой: Azure
ПровайдерВводВывод
1Cloudflare Workers AIСамый дешевый
$0.0485
$0.676
2Kilo Gateway
$0.049
$0.049
3Cloudflare AI Gateway
$0.049
$0.68
4Inference
$0.055
$0.055
5LLM Gateway
$0.07
$0.33
6Vercel AI Gateway
$0.16
$0.16
7MetaОсновной
$0.245
$0.245
8OpenRouter
$0.345
$0.345
9Azure Cognitive Services
$0.37
$0.37
10Azure
$0.37
$0.37
Сравнение цен разных API-провайдеров для этой модели.