跳转到主要内容
AITier

Claude Instant

AnthropicClaude
发布日期
2023-03-14
参数规模
—
上下文长度
1.0M
支持模态
image, pdf, text

能力雷达图

15
general
9
coding
15
reasoning
24
science估算
80
agents
80
multimodal

Science 在缺少专门科学评测时使用推理能力代理估算。

排行榜排名

领域#排名分数来源
代码能力榜445
10.0
AA
通用能力榜478
16.0
AA
数学推理337
11.0
AA
科学能力457
17.0
AA

基准测试分数 (LLM Stats)

Agents

Vending-Bench 2801759.0%自报
GDPval-AA1606.00 / 3000自报
DeepSearchQA91.3%自报
BrowseComp84.0%自报
CyberGym73.8%自报
OSWorld72.7%自报
Terminal-Bench 2.065.4%自报
MCP Atlas62.7%自报
Finance Agent60.7%自报
FrontierSWE56.0%自报
OpenRCA34.9%自报
Legal Agent Benchmark4.2%自报

Biology

GPQA91.3%自报

Code

SWE-Bench Verified80.8%自报
SWE-bench Multilingual77.8%自报

Communication

Tau2 Telecom99.3%自报
Tau2 Retail91.9%自报

General

MMMLU91.1%自报
MMMU-Pro77.3%自报
LiveBench76.3%自报
MRCR v2 (8-needle)76.0%自报

Healthcare

FigQA78.3%自报

Long Context

Graphwalks parents >128k95.4%自报
Graphwalks BFS >128k61.5%自报

Math

AIME 202599.8%自报
Humanity's Last Exam53.1%自报

Multimodal

CharXiv-R77.4%自报

Reasoning

ARC-AGI v268.8%自报

AA 评测指数

Coding Index
7.8
Intelligence Index
2.1
Mmlu Pro
0.4
Gpqa
0.3
Math 500
0.3
Livecodebench
0.1
Hle
0.0
Aime
0.0

LLM Stats 分类评分

Agents
100
Finance
100
Legal
100
Reasoning
100
General
100
Communication
100
Language
90
Physics
90
Search
90
Biology
90
Chemistry
90
Long Context
80
Math
80
Multimodal
80
Safety
80
Spatial Reasoning
80
Frontend Development
80
Healthcare
80
Tool Calling
80
Code
70
Vision
70

定价

输入价格免费
输出价格免费
混合价格(3:1)免费
缓存读取价格$0.5 / 1M tokens
缓存写入价格$6.25 / 1M tokens

速度

Tokens/秒0.0
首Token延迟0.00s
首回答延迟0.00s

供应商价格排行

暂无提供商数据

外部链接

Artificial Analysis