Claude 3.5 Sonnet (June '24)
AnthropicClaude
説明
Claude 3.5 Sonnet is a powerful AI model. It excels in graduate-level reasoning, undergraduate-level knowledge, and coding proficiency, with improved understanding of nuance, humor, and complex instructions.
リリース日
2024-06-21
パラメータ
—
コンテキスト長
200K
モダリティ
image, pdf, text
能力レーダー
28
general
27
coding
37
reasoning
37
science推定
60
agents
100
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 274 | 33.0 | AA |
| 総合ランキング | 303 | 36.0 | AA |
| 数学的推論 | 229 | 39.0 | AA |
| 科学 | 309 | 37.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
59.4%自己申告
Code
HumanEval
92.0%自己申告
Finance
MMLU
90.4%自己申告
MMLU-Pro
76.1%自己申告
Language
BIG-Bench Hard
93.1%自己申告
Math
GSM8k
96.4%自己申告
MGSM
91.6%自己申告
DROP
87.1%自己申告
MATH
71.1%自己申告
AA評価指数
Coding Index26.0
Intelligence Index8.3
Mmlu Pro0.8
Math 5000.7
Gpqa0.6
Scicode0.3
Aime0.1
Hle0.0
LLM Statsカテゴリスコア
Language90
Math90
Code90
Legal80
Reasoning80
Finance80
General80
Healthcare80
Physics60
Biology60
Chemistry60
価格設定
入力価格$3 / 1Mトークン
出力価格$15 / 1Mトークン
混合価格（3:1）$6 / 1Mトークン
キャッシュ読み取り価格$0.3 / 1Mトークン
キャッシュ書き込み価格$3.75 / 1Mトークン
速度
トークン/秒0.0
初トークン遅延0.00s
初回答遅延0.00s
プロバイダー価格ランキング
プロバイダー価格ランキング
1 プロバイダー
プロバイダー入力出力
1Anthropicプライマリ
$3
$15
このモデルの異なるAPIプロバイダー間の価格を比較。