跳转到主要内容

Llama 3 Instruct 70B

MetaLlama
发布日期
2024-04-18
参数规模
上下文长度
131K
支持模态
text

能力雷达图

20
general
20
coding
22
reasoning
25
science估算
80
agents
0
multimodal

Science 在缺少专门科学评测时使用推理能力代理估算。

排行榜排名

领域#排名分数来源
代码能力榜463
7.0
AA
通用能力榜445
21.0
AA
数学推理295
23.0
AA
科学能力421
23.0
AA

基准测试分数 (LLM Stats)

Biology

GPQA50.5%自报

Code

HumanEval88.4%自报

Finance

MMLU86.0%自报
MMLU-Pro68.9%自报

General

IFEval92.1%自报
MBPP EvalPlus87.6%自报
BFCL v277.3%自报

Math

MGSM91.1%自报
MATH77.0%自报

AA 评测指数

Intelligence Index
3.5
Mmlu Pro
0.6
Math 500
0.5
Gpqa
0.4
Ifbench
0.4
Livecodebench
0.2
Scicode
0.2
Hle
0.0
Terminalbench Hard
0.0
Aime
0.0
Lcr
0.0
Tau2
0.0

LLM Stats 分类评分

Instruction Following
90
Structured Output
90
Code
90
Language
80
Legal
80
Math
80
Reasoning
80
Finance
80
Healthcare
80
Tool Calling
80
General
70
Physics
50
Biology
50
Chemistry
50

定价

输入价格$0.65 / 1M tokens
输出价格$2.75 / 1M tokens
混合价格(3:1)$1.175 / 1M tokens

速度

Tokens/秒43.0
首Token延迟0.71s
首回答延迟0.71s

供应商价格排行

供应商价格排行

7 个供应商

最便宜: NovitaAI最贵: Azure
供应商输入输出
1NovitaAI最便宜
$0.51
$0.74
2Kilo Gateway
$0.51
$0.74
3LLM Gateway
$0.51
$0.74
4Meta主要
$0.65
$2.75
5NanoGPT
$0.7
$0.7
6Azure Cognitive Services
$2.68
$3.54
7Azure
$2.68
$3.54

比较该模型在不同 API 供应商之间的定价。

外部链接