メインコンテンツへスキップ
AITier

Claude 3.5 Sonnet

AnthropicClaudeProprietary

説明

Claude 3.5 Sonnet is a powerful AI model with industry-leading software engineering skills. It excels in coding, planning, and problem-solving, with significant improvements in agentic coding and tool use tasks. The model includes computer use capabilities in public beta, allowing it to interact with computer interfaces like a human user.

リリース日
2024-10-22
パラメータ
—
コンテキスト長
—
モダリティ
image, text

能力レーダー

80
general
70
coding
90
reasoning
60
science推定
60
agents
100
multimodal

専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。

ランキング

ドメイン#順位スコアソース
Agents & Tools99
18.0
LS
Multimodal Ranking1
94.0
LS

ベンチマークスコア (LLM Stats)

Agents

OSWorld Extended22.0%自己申告
OSWorld Screenshot-only14.9%自己申告

Biology

GPQA67.2%自己申告

Code

HumanEval93.7%自己申告
SWE-Bench Verified49.0%自己申告

Communication

TAU-bench Retail69.2%自己申告
TAU-bench Airline46.0%自己申告

Finance

MMLU90.4%自己申告
MMLU-Pro77.6%自己申告

General

MMMU68.3%自己申告

Image To Text

DocVQA95.2%自己申告

Language

BIG-Bench Hard93.1%自己申告

Math

GSM8k96.4%自己申告
MGSM91.6%自己申告
DROP87.1%自己申告
MATH78.3%自己申告
MathVista67.7%自己申告

Multimodal

AI2D94.7%自己申告
ChartQA90.8%自己申告

AA評価指数

AA評価データがありません

LLM Statsカテゴリスコア

Image To Text
100
Language
90
Math
90
Vision
80
Finance
80
General
80
Healthcare
80
Legal
80
Multimodal
80
Reasoning
80
Biology
70
Chemistry
70
Code
70
Physics
70
Tool Calling
60
Communication
60
Frontend Development
50

価格設定

価格データがありません

速度

速度データがありません

利用可能なプロバイダー

(LS内部単位)

プロバイダーデータがありません

外部リンク

LLM Stats