Перейти к основному содержанию

Nova Pro

AmazonAmazonProprietary

Описание

Amazon Nova Pro is a highly-capable multimodal model with state-of-the-art performance across text, image, and video understanding. It excels at core capabilities like language understanding, mathematical reasoning, and multimodal tasks while offering industry-leading speed and cost efficiency.

Дата выхода
2024-12-03
Параметры
Длина контекста
300K
Модальности
image, text

Радар способностей

29
general
16
coding
23
reasoning
30
scienceоцен.
70
agents
90
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Домен#МестоОценкаИсточник
Agents & Tools29
64.0
LS
Code Ranking345
20.0
AA
General Ranking348
32.0
AA
Math Reasoning298
22.0
AA
Multimodal Ranking12
88.0
LS
Science369
29.0
AA

Оценки бенчмарков (LLM Stats)

Agents

MM-Mind2Web63.7%Сам.

Biology

GPQA46.9%Сам.

Code

HumanEval89.0%Сам.

Economics

FinQA77.2%Сам.
CRAG50.3%Сам.

Finance

MMLU85.9%Сам.

Frontend Development

VisualWebBench79.7%Сам.

General

ARC-C94.8%Сам.
IFEval92.1%Сам.
BFCL68.4%Сам.
MMMU61.7%Сам.

Grounding

GroundUI-1K81.4%Сам.

Image To Text

DocVQA93.5%Сам.
TextVQA81.5%Сам.

Language

Translation en→Set1 COMET2289.1%Сам.
Translation Set1→en COMET2289.0%Сам.
BBH86.9%Сам.
VATEX77.8%Сам.
Translation Set1→en spBleu44.4%Сам.
Translation en→Set1 spBleu43.4%Сам.
SQuALITY19.8%Сам.

Long Context

EgoSchema72.1%Сам.
LVBench41.6%Сам.

Math

GSM8k94.8%Сам.
DROP85.4%Сам.
MATH76.6%Сам.

Multimodal

ChartQA89.2%Сам.

Индексы оценки AA

Intelligence Index
13.5
Coding Index
11.0
Math Index
7.0
Math 500
0.8
Mmlu Pro
0.7
Gpqa
0.5
Ifbench
0.4
Livecodebench
0.2
Scicode
0.2
Lcr
0.2
Tau2
0.1
Aime
0.1
Aime 25
0.1
Terminalbench Hard
0.1
Hle
0.0

Оценки категорий LLM Stats

Structured Output
90
Code
90
Image To Text
90
Instruction Following
90
Legal
90
Math
80
Reasoning
80
Tool Calling
70
Vision
70
Finance
70
General
70
Healthcare
70
Language
70
Multimodal
70
Agents
60
Economics
60
Frontend Development
60
Biology
50
Chemistry
50
Physics
50
Search
50
Long Context
40
Summarization
20

Цены

Цена ввода$0.8 / 1M tokens
Цена вывода$3.2 / 1M tokens
Смешанная цена (3:1)$1.4 / 1M tokens

Скорость

Токенов/сек0.0 tokens/s
Задержка первого токена0.00s
Время до первого ответа0.00s

Доступные провайдеры

(Внутренние единицы LS)

Нет данных провайдеров

Внешние ссылки