Saltar al contenido principal

Llama 3.2 Instruct 11B (Vision)

MetaLlamaOpen WeightLlama 3.2 Community License

Descripción

Llama 3.2 11B Vision Instruct is an instruction-tuned multimodal large language model optimized for visual recognition, image reasoning, captioning, and answering general questions about an image. It accepts text and images as input and generates text as output.

Fecha de lanzamiento
2024-09-25
Parámetros
10.6B
Longitud del contexto
—
Modalidades
image, text

Radar de capacidades

18
general
11
coding
13
reasoning
17
science
12
agents
90
multimodal

Rankings

Dominio#PosiciónPuntuaciónFuente
Ranking de codificación596
9.0
AA
Ranking general585
20.0
AA
Ranking multimodal124
37.0
LS
Ciencia648
11.0
AA

Puntuaciones de benchmarks (LLM Stats)

(LLM Stats (zeroeval))

General

MMLU73.0%Aut.

Math

MGSM68.9%Aut.
MATH51.9%Aut.
MathVista51.5%Aut.

Multimodal

MMMU50.7%Aut.

Reasoning

ChartQAMasry et al. (2022)83.4%Aut.
GPQANYU + Cohere + Anthropic (2023)32.8%Aut.

Vision

AI2D91.1%Aut.
DocVQADocVQA (2020)88.4%Aut.
VQAv2 (test)75.2%Aut.
MMMU-Pro33.0%Aut.

Índices de evaluación AA

(Artificial Analysis)
Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))
51.6
Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))
46.4
Ifbench(Google Research (2023))
30.4
Gpqa(NYU + Cohere + Anthropic (2023))
22.1
Tau2(Sierra + U Toronto + Vector Institute (2025))
14.6
Lcr(Artificial Analysis)
12.7
Livecodebench(UC Berkeley + MIT + Cornell (2024))
11.0
Aime(MAA (Mathematical Association of America))
9.3
Hle(Center for AI Safety + Scale AI (2025))
5.5
Intelligence Index(Artificial Analysis)
5.4
Math Index(Artificial Analysis)
1.7
Aime 25(MAA (Mathematical Association of America))
1.7
Terminalbench Hard(Stanford × Laude Institute (2026))
0.8

Puntuaciones por categoría LLM Stats

(LLM Stats (zeroeval))
Image To Text
90
Language
70
Legal
70
Multimodal
70
Finance
70
Vision
70
Math
60
Reasoning
60
General
60
Healthcare
60
Physics
30
Biology
30
Chemistry
30

Precios

Precio de entrada$0.345 / 1M tokens
Precio de salida$0.345 / 1M tokens
Precio mixto (3:1)$0.345 / 1M tokens

Velocidad

Tokens/seg15.1
Retraso del primer token1.54s
Tiempo hasta la respuesta1.54s

Ranking de Precios por Proveedor

Ranking de Precios por Proveedor

1 proveedores

ProveedorEntradaSalida
1MetaPRINCIPAL
$0.345
$0.345

Comparar precios entre diferentes proveedores de API para este modelo.

Fuentes externas