Llama 3.3 Instruct 70B
MetaLlamaOpen WeightLlama 3.3 Community License Agreement
説明
Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.
リリース日
2024-12-06
パラメータ
70.0B
コンテキスト長
131K
モダリティ
text
能力レーダー
30
general
19
coding
28
reasoning
32
science推定
80
agents
0
multimodal
専門的な科学ベンチマークが利用できない場合、Scienceは推論プロキシを使用して推定します。
ランキング
| ドメイン | #順位 | スコア | ソース |
|---|---|---|---|
| Code Ranking | 357 | 18.0 | AA |
| General Ranking | 280 | 38.0 | AA |
| Math Reasoning | 280 | 26.0 | AA |
| Science | 334 | 32.0 | AA |
ベンチマークスコア (LLM Stats)
Biology
GPQA
50.5%自己申告
Code
HumanEval
88.4%自己申告
Finance
MMLU
86.0%自己申告
MMLU-Pro
68.9%自己申告
General
IFEval
92.1%自己申告
MBPP EvalPlus
87.6%自己申告
BFCL v2
77.3%自己申告
Math
MGSM
91.1%自己申告
MATH
77.0%自己申告
AA評価指数
Intelligence Index14.5
Coding Index10.7
Math Index7.7
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Ifbench0.5
Aime0.3
Livecodebench0.3
Tau20.3
Scicode0.3
Lcr0.1
Aime 250.1
Hle0.0
Terminalbench Hard0.0
LLM Statsカテゴリスコア
Structured Output90
Code90
Instruction Following90
Tool Calling80
Finance80
Healthcare80
Language80
Legal80
Math80
Reasoning80
General70
Biology50
Chemistry50
Physics50
価格設定
入力価格$0.585 / 1M tokens
出力価格$0.71 / 1M tokens
混合価格(3:1)$0.616 / 1M tokens
速度
トークン/秒92.9 tokens/s
初トークン遅延0.57s
初回答遅延0.57s
利用可能なプロバイダー
(LS内部単位)プロバイダーデータがありません