Nova Lite
AmazonAmazonProprietary
Описание
A low-cost multimodal model that is lightning fast for processing images, video, documents, and text.
Дата выхода
2024-12-03
Параметры
—
Длина контекста
—
Модальности
image, text
Радар способностей
25
general
10
coding
22
reasoning
25
scienceоцен.
70
agents
90
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Agents & Tools | 39 | 61.0 | LS |
| Code Ranking | 411 | 12.0 | AA |
| General Ranking | 381 | 28.0 | AA |
| Math Reasoning | 299 | 22.0 | AA |
| Multimodal Ranking | 17 | 86.0 | LS |
| Science | 396 | 24.0 | AA |
Оценки бенчмарков (LLM Stats)
Agents
MM-Mind2Web
60.7%Сам.
Biology
GPQA
42.0%Сам.
Code
HumanEval
85.4%Сам.
Economics
FinQA
73.6%Сам.
CRAG
43.8%Сам.
Finance
MMLU
80.5%Сам.
Frontend Development
VisualWebBench
77.7%Сам.
General
ARC-C
92.4%Сам.
IFEval
89.7%Сам.
BFCL
66.6%Сам.
MMMU
56.2%Сам.
Grounding
GroundUI-1K
80.2%Сам.
Image To Text
DocVQA
92.4%Сам.
TextVQA
80.2%Сам.
Language
Translation Set1→en COMET22
88.8%Сам.
Translation en→Set1 COMET22
88.8%Сам.
BBH
82.4%Сам.
VATEX
77.8%Сам.
Translation Set1→en spBleu
43.1%Сам.
Translation en→Set1 spBleu
41.5%Сам.
SQuALITY
19.2%Сам.
Long Context
EgoSchema
71.4%Сам.
LVBench
40.4%Сам.
Math
GSM8k
94.5%Сам.
DROP
80.2%Сам.
MATH
73.3%Сам.
Multimodal
ChartQA
86.8%Сам.
Индексы оценки AA
Intelligence Index12.7
Math Index7.0
Coding Index5.1
Math 5000.8
Mmlu Pro0.6
Gpqa0.4
Ifbench0.3
Lcr0.2
Tau20.2
Livecodebench0.2
Scicode0.1
Aime0.1
Aime 250.1
Hle0.0
Terminalbench Hard0.0
Оценки категорий LLM Stats
Structured Output90
Code90
Image To Text90
Instruction Following90
Legal80
Math80
Tool Calling70
Vision70
Finance70
General70
Healthcare70
Multimodal70
Reasoning70
Agents60
Economics60
Frontend Development60
Language60
Biology40
Chemistry40
Long Context40
Physics40
Search40
Summarization20
Цены
Цена ввода$0.06 / 1M tokens
Цена вывода$0.24 / 1M tokens
Смешанная цена (3:1)$0.105 / 1M tokens
Скорость
Токенов/сек186.0 tokens/s
Задержка первого токена0.66s
Время до первого ответа0.66s
Доступные провайдеры
(Внутренние единицы LS)Нет данных провайдеров