メインコンテンツへスキップ

Llama 3.2 Instruct 1B

MetaLlama
リリース日
2024-09-25
パラメータ
コンテキスト長
131K
モダリティ
text

能力レーダー

7
general
2
coding
4
reasoning
10
science推定
80
agents
0
multimodal

専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。

ランキング

ドメイン#順位スコアソース
コーディングランキング484
3.0
AA
総合ランキング520
6.0
AA
数学的推論350
2.0
AA
科学504
8.0
AA

ベンチマークスコア (LLM Stats)

Biology

GPQA50.5%自己申告

Code

HumanEval88.4%自己申告

Finance

MMLU86.0%自己申告
MMLU-Pro68.9%自己申告

General

IFEval92.1%自己申告
MBPP EvalPlus87.6%自己申告
BFCL v277.3%自己申告

Math

MGSM91.1%自己申告
MATH77.0%自己申告

AA評価指数

Intelligence Index
1.1
Ifbench
0.2
Mmlu Pro
0.2
Gpqa
0.2
Math 500
0.1
Hle
0.1
Lcr
0.1
Livecodebench
0.0
Scicode
0.0
Math Index
0.0
Aime
0.0
Aime 25
0.0
Terminalbench Hard
0.0
Tau2
0.0

LLM Statsカテゴリスコア

Instruction Following
90
Structured Output
90
Code
90
Language
80
Legal
80
Math
80
Reasoning
80
Finance
80
Healthcare
80
Tool Calling
80
General
70
Physics
50
Biology
50
Chemistry
50

価格設定

入力価格$0.05 / 1Mトークン
出力価格$0.05 / 1Mトークン
混合価格(3:1)$0.05 / 1Mトークン

速度

トークン/秒87.5
初トークン遅延0.62s
初回答遅延0.62s

プロバイダー価格ランキング

プロバイダー価格ランキング

8 プロバイダー

最安: Chutes最高: Vercel AI Gateway
プロバイダー入力出力
1Chutes最安
$0.01
$0.0109
2Inference
$0.01
$0.01
3OpenRouter
$0.027
$0.201
4Kilo Gateway
$0.027
$0.2
5Cloudflare AI Gateway
$0.027
$0.2
6Cloudflare Workers AI
$0.027
$0.201
7Metaプライマリ
$0.05
$0.05
8Vercel AI Gateway
$0.1
$0.1

このモデルの異なるAPIプロバイダー間の価格を比較。

外部リンク