Claude 3.5 Sonnet
AnthropicClaudeProprietary
説明
Claude 3.5 Sonnet is a powerful AI model with industry-leading software engineering skills. It excels in coding, planning, and problem-solving, with significant improvements in agentic coding and tool use tasks. The model includes computer use capabilities in public beta, allowing it to interact with computer interfaces like a human user.
リリース日
2024-10-22
パラメータ
—
コンテキスト長
—
モダリティ
image, text
能力レーダー
80
general
70
coding
90
reasoning
60
science推定
60
agents
100
multimodal
専用の科学ベンチマークがない場合、Science は LLM Stats の科学スコアまたは推論能力から推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| マルチモーダルランキング | 6 | 65.0 | LS |
ベンチマークスコア (LLM Stats)
(LLM Stats (zeroeval))Agents
OSWorld Extended
22.0%自己申告
OSWorld Screenshot-only
14.9%自己申告
Biology
GPQANYU + Cohere + Anthropic (2023)
67.2%自己申告
Code
HumanEvalOpenAI (2021)
93.7%自己申告
SWE-Bench Verified
49.0%自己申告
Communication
TAU-bench Retail
69.2%自己申告
TAU-bench Airline
46.0%自己申告
Finance
MMLU
90.4%自己申告
MMLU-Pro
77.6%自己申告
General
MMMU
68.3%自己申告
Image To Text
DocVQADocVQA (2020)
95.2%自己申告
Language
BIG-Bench Hard
93.1%自己申告
Math
GSM8k
96.4%自己申告
MGSM
91.6%自己申告
DROP
87.1%自己申告
MATH
78.3%自己申告
MathVista
67.7%自己申告
Multimodal
AI2D
94.7%自己申告
ChartQAMasry et al. (2022)
90.8%自己申告
AA評価指数
(Artificial Analysis)AA評価データがありません
LLM Statsカテゴリスコア
(LLM Stats (zeroeval))Image To Text100
Language90
Math90
Legal80
Multimodal80
Reasoning80
Finance80
General80
Healthcare80
Vision80
Physics70
Biology70
Chemistry70
Code70
Communication60
Tool Calling60
Frontend Development50
価格設定
価格データがありません
速度
速度データがありません
プロバイダー価格ランキング
プロバイダーデータがありません