Llama 3.1 Instruct 8B
MetaLlamaオープンウエイトLlama 3.1 Community License
説明
Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.
リリース日
2024-07-23
パラメータ
8.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
18
general
12
coding
14
reasoning
17
science推定
50
agents
0
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| コーディングランキング | 440 | 11.0 | AA |
| 総合ランキング | 435 | 22.0 | AA |
| 数学的推論 | 324 | 14.0 | AA |
| 推論 | 28 | 83.0 | LS |
| 科学 | 464 | 16.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
30.4%自己申告
Code
HumanEval
72.6%自己申告
Gorilla Benchmark API Bench
8.2%自己申告
Finance
MMLU (CoT)
73.0%自己申告
MMLU
69.4%自己申告
MMLU-Pro
48.3%自己申告
General
ARC-C
83.4%自己申告
IFEval
80.4%自己申告
BFCL
76.1%自己申告
MBPP EvalPlus (base)
72.8%自己申告
Multipl-E MBPP
52.4%自己申告
Multipl-E HumanEval
50.8%自己申告
Nexus
38.5%自己申告
Math
GSM-8K (CoT)
84.5%自己申告
Multilingual MGSM (CoT)
68.9%自己申告
DROP
59.5%自己申告
MATH (CoT)
51.9%自己申告
Reasoning
API-Bank
82.6%自己申告
AA評価指数
Intelligence Index6.1
Math Index4.3
Math 5000.5
Mmlu Pro0.5
Ifbench0.3
Gpqa0.3
Tau20.2
Lcr0.2
Scicode0.1
Livecodebench0.1
Aime0.1
Hle0.1
Aime 250.0
Terminalbench Hard0.0
LLM Statsカテゴリスコア
Instruction Following80
Structured Output80
Language60
Legal60
Math60
Reasoning60
Finance60
General60
Healthcare60
Tool Calling50
Code40
Physics30
Biology30
Chemistry30
価格設定
入力価格$0.1 / 1Mトークン
出力価格$0.1 / 1Mトークン
混合価格（3:1）$0.1 / 1Mトークン
速度
トークン/秒201.0
初トークン遅延0.51s
初回答遅延0.51s
プロバイダー価格ランキング
プロバイダー価格ランキング
23 プロバイダー
最安: NanoGPT最高: Azure
プロバイダー入力出力
1NanoGPT最安
$0.02
$0.03
2Abacus
$0.02
$0.05
3OpenRouter
$0.02
$0.03
4NovitaAI
$0.02
$0.05
5Kilo Gateway
$0.02
$0.05
6Helicone
$0.02
$0.05
7Inference
$0.025
$0.025
8Groq
$0.05
$0.08
9Regolo AI
$0.05
$0.25
10Metaプライマリ
$0.1
$0.1
11Poe
$0.1
$0.1
12Friendli
$0.1
$0.1
13OVHcloud AI Endpoints
$0.11
$0.11
14Cloudflare Workers AI
$0.152
$0.287
15STACKIT
$0.16
$0.27
16Synthetic
$0.2
$0.2
17Weights & Biases
$0.22
$0.22
18Amazon Bedrock
$0.22
$0.22
19Vercel AI Gateway
$0.22
$0.22
20LLM Gateway
$0.22
$0.22
21Cloudflare AI Gateway
$0.28
$0.83
22Azure Cognitive Services
$0.3
$0.61
23Azure
$0.3
$0.61
このモデルの異なるAPIプロバイダー間の価格を比較。