メインコンテンツへスキップ

Claude 3 Haiku

AnthropicClaudeProprietary

説明

Claude 3 Haiku is the fastest and most compact model in the Claude 3 family, designed for near-instant responsiveness. It excels at answering simple queries and requests with unmatched speed, making it ideal for seamless AI experiences that mimic human interactions.

リリース日
2024-03-04
パラメータ
コンテキスト長
200K
モダリティ
image, text

能力レーダー

11
general
11
coding
20
reasoning
24
science推定
0
agents
80
multimodal

専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。

ランキング

ドメイン#順位スコアソース
Code Ranking396
14.0
AA
General Ranking433
21.0
AA
Math Reasoning308
19.0
AA
Reasoning19
86.0
LS
Science395
24.0
AA

ベンチマークスコア (LLM Stats)

Biology

GPQA33.3%自己申告

Code

HumanEval75.9%自己申告

Finance

MMLU75.2%自己申告

General

ARC-C89.2%自己申告

Language

BIG-Bench Hard73.7%自己申告

Math

GSM8k88.9%自己申告
DROP78.4%自己申告
MGSM75.1%自己申告
MATH38.9%自己申告

Reasoning

HellaSwag85.9%自己申告

AA評価指数

Intelligence Index
12.3
Coding Index
6.7
Math 500
0.4
Gpqa
0.4
Ifbench
0.4
Tau2
0.2
Lcr
0.2
Scicode
0.2
Livecodebench
0.2
Hle
0.0
Aime
0.0
Terminalbench Hard
0.0

LLM Statsカテゴリスコア

Code
80
Finance
80
Healthcare
80
Legal
80
General
70
Language
70
Math
70
Reasoning
70
Biology
30
Chemistry
30
Physics
30

価格設定

入力価格$0.25 / 1M tokens
出力価格$1.25 / 1M tokens
混合価格(3:1)$0.5 / 1M tokens

速度

トークン/秒0.0 tokens/s
初トークン遅延0.00s
初回答遅延0.00s

利用可能なプロバイダー

(LS内部単位)

プロバイダーデータがありません

外部リンク