Llama 3.2 Instruct 3B
MetaLlamaオープンウエイトLlama 3.2 Community License
説明
Llama 3.2 3B Instruct is a large language model that supports a context length of 128K tokens and are state-of-the-art in their class for on-device use cases like summarization, instruction following, and rewriting tasks running locally at the edge.
リリース日
2024-09-25
パラメータ
3.2B
コンテキスト長
131K
モダリティ
text
能力レーダー
13
general
8
coding
13
reasoning
14
science推定
50
agents
0
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 469 | 6.0 | AA |
| 総合ランキング | 467 | 17.0 | AA |
| 数学的推論 | 332 | 12.0 | AA |
| 推論 | 49 | 70.0 | LS |
| 科学 | 490 | 12.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
32.8%自己申告
Finance
MMLU
63.4%自己申告
General
ARC-C
78.6%自己申告
IFEval
77.4%自己申告
BFCL v2
67.0%自己申告
Nexus
34.3%自己申告
Language
Open-rewrite
40.1%自己申告
TLDR9+ (test)
19.0%自己申告
Long Context
NIH/Multi-needle
84.7%自己申告
InfiniteBench/En.MC
63.3%自己申告
InfiniteBench/En.QA
19.8%自己申告
Math
GSM8k
77.7%自己申告
MGSM
58.2%自己申告
MATH
48.0%自己申告
Reasoning
HellaSwag
69.8%自己申告
AA評価指数
Intelligence Index4.2
Math Index3.3
Math 5000.5
Mmlu Pro0.3
Ifbench0.3
Gpqa0.3
Tau20.2
Livecodebench0.1
Aime0.1
Hle0.1
Scicode0.1
Aime 250.0
Lcr0.0
LLM Statsカテゴリスコア
Instruction Following80
Structured Output80
Language60
Legal60
Math60
Reasoning60
Finance60
General60
Healthcare60
Tool Calling50
Physics30
Biology30
Chemistry30
価格設定
入力価格$0.15 / 1Mトークン
出力価格$0.15 / 1Mトークン
混合価格（3:1）$0.15 / 1Mトークン
速度
トークン/秒52.3
初トークン遅延0.59s
初回答遅延0.59s
プロバイダー価格ランキング
プロバイダー価格ランキング
11 プロバイダー
最安: Chutes最高: Vercel AI Gateway
プロバイダー入力出力
1Chutes最安
$0.01
$0.0136
2Inference
$0.02
$0.02
3NovitaAI
$0.03
$0.05
4LLM Gateway
$0.03
$0.05
5NanoGPT
$0.0306
$0.0493
6Cloudflare Workers AI
$0.0509
$0.335
7Kilo Gateway
$0.051
$0.34
8Cloudflare AI Gateway
$0.051
$0.34
9Metaプライマリ
$0.15
$0.15
10Venice AI
$0.15
$0.6
11Vercel AI Gateway
$0.15
$0.15
このモデルの異なるAPIプロバイダー間の価格を比較。