跳转到主要内容

Nova Lite

AmazonAmazonProprietary

描述

A low-cost multimodal model that is lightning fast for processing images, video, documents, and text.

发布日期
2024-12-03
参数规模
上下文长度
支持模态
image, text

能力雷达图

25
general
10
coding
22
reasoning
25
science估算
70
agents
90
multimodal

Science 在缺少专门科学评测时使用推理能力代理估算。

排行榜排名

领域#排名分数来源
智能体与工具39
61.0
LS
代码能力榜411
12.0
AA
通用能力榜381
28.0
AA
数学推理299
22.0
AA
多模态榜17
86.0
LS
科学能力396
24.0
AA

基准测试分数 (LLM Stats)

Agents

MM-Mind2Web60.7%自报

Biology

GPQA42.0%自报

Code

HumanEval85.4%自报

Economics

FinQA73.6%自报
CRAG43.8%自报

Finance

MMLU80.5%自报

Frontend Development

VisualWebBench77.7%自报

General

ARC-C92.4%自报
IFEval89.7%自报
BFCL66.6%自报
MMMU56.2%自报

Grounding

GroundUI-1K80.2%自报

Image To Text

DocVQA92.4%自报
TextVQA80.2%自报

Language

Translation Set1→en COMET2288.8%自报
Translation en→Set1 COMET2288.8%自报
BBH82.4%自报
VATEX77.8%自报
Translation Set1→en spBleu43.1%自报
Translation en→Set1 spBleu41.5%自报
SQuALITY19.2%自报

Long Context

EgoSchema71.4%自报
LVBench40.4%自报

Math

GSM8k94.5%自报
DROP80.2%自报
MATH73.3%自报

Multimodal

ChartQA86.8%自报

AA 评测指数

Intelligence Index
12.7
Math Index
7.0
Coding Index
5.1
Math 500
0.8
Mmlu Pro
0.6
Gpqa
0.4
Ifbench
0.3
Lcr
0.2
Tau2
0.2
Livecodebench
0.2
Scicode
0.1
Aime
0.1
Aime 25
0.1
Hle
0.0
Terminalbench Hard
0.0

LLM Stats 分类评分

Structured Output
90
Code
90
Image To Text
90
Instruction Following
90
Legal
80
Math
80
Tool Calling
70
Vision
70
Finance
70
General
70
Healthcare
70
Multimodal
70
Reasoning
70
Agents
60
Economics
60
Frontend Development
60
Language
60
Biology
40
Chemistry
40
Long Context
40
Physics
40
Search
40
Summarization
20

定价

输入价格$0.06 / 1M tokens
输出价格$0.24 / 1M tokens
混合价格(3:1)$0.105 / 1M tokens

速度

Tokens/秒186.0 tokens/s
首Token延迟0.66s
首回答延迟0.66s

可用提供商

(LS 内部计价单位)

暂无提供商数据

外部链接