Claude 3 Haiku
AnthropicClaudeProprietary
説明
Claude 3 Haiku is the fastest and most compact model in the Claude 3 family, designed for near-instant responsiveness. It excels at answering simple queries and requests with unmatched speed, making it ideal for seamless AI experiences that mimic human interactions.
リリース日
2024-03-04
パラメータ
—
コンテキスト長
200K
モダリティ
image, text
能力レーダー
11
general
11
coding
20
reasoning
24
science推定
0
agents
80
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| Code Ranking | 396 | 14.0 | AA |
| General Ranking | 433 | 21.0 | AA |
| Math Reasoning | 308 | 19.0 | AA |
| Reasoning | 19 | 86.0 | LS |
| Science | 395 | 24.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
33.3%自己申告
Code
HumanEval
75.9%自己申告
Finance
MMLU
75.2%自己申告
General
ARC-C
89.2%自己申告
Language
BIG-Bench Hard
73.7%自己申告
Math
GSM8k
88.9%自己申告
DROP
78.4%自己申告
MGSM
75.1%自己申告
MATH
38.9%自己申告
Reasoning
HellaSwag
85.9%自己申告
AA評価指数
Intelligence Index12.3
Coding Index6.7
Math 5000.4
Gpqa0.4
Ifbench0.4
Tau20.2
Lcr0.2
Scicode0.2
Livecodebench0.2
Hle0.0
Aime0.0
Terminalbench Hard0.0
LLM Statsカテゴリスコア
Code80
Finance80
Healthcare80
Legal80
General70
Language70
Math70
Reasoning70
Biology30
Chemistry30
Physics30
価格設定
入力価格$0.25 / 1M tokens
出力価格$1.25 / 1M tokens
混合価格(3:1)$0.5 / 1M tokens
速度
トークン/秒0.0 tokens/s
初トークン遅延0.00s
初回答遅延0.00s
利用可能なプロバイダー
(LS内部単位)プロバイダーデータがありません