메인 콘텐츠로 건너뛰기

Llama 3 Instruct 70B

MetaLlama
출시일
2024-04-18
파라미터
컨텍스트 길이
131K
모달리티
text

능력 레이더

20
general
20
coding
22
reasoning
25
science추정
80
agents
0
multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인#순위점수소스
코딩 랭킹463
7.0
AA
종합 랭킹445
21.0
AA
수학 추론295
23.0
AA
과학421
23.0
AA

벤치마크 점수 (LLM Stats)

Biology

GPQA50.5%자체 보고

Code

HumanEval88.4%자체 보고

Finance

MMLU86.0%자체 보고
MMLU-Pro68.9%자체 보고

General

IFEval92.1%자체 보고
MBPP EvalPlus87.6%자체 보고
BFCL v277.3%자체 보고

Math

MGSM91.1%자체 보고
MATH77.0%자체 보고

AA 평가 지수

Intelligence Index
3.5
Mmlu Pro
0.6
Math 500
0.5
Gpqa
0.4
Ifbench
0.4
Livecodebench
0.2
Scicode
0.2
Hle
0.0
Terminalbench Hard
0.0
Aime
0.0
Lcr
0.0
Tau2
0.0

LLM Stats 카테고리 점수

Instruction Following
90
Structured Output
90
Code
90
Language
80
Legal
80
Math
80
Reasoning
80
Finance
80
Healthcare
80
Tool Calling
80
General
70
Physics
50
Biology
50
Chemistry
50

가격

입력 가격$0.65 / 1M 토큰
출력 가격$2.75 / 1M 토큰
혼합 가격 (3:1)$1.175 / 1M 토큰

속도

토큰/초43.0
첫 토큰 지연0.71s
첫 응답 지연0.71s

공급자 가격 순위

공급자 가격 순위

7개 공급자

최저가: NovitaAI최고가: Azure
공급자입력출력
1NovitaAI최저가
$0.51
$0.74
2Kilo Gateway
$0.51
$0.74
3LLM Gateway
$0.51
$0.74
4Meta주요
$0.65
$2.75
5NanoGPT
$0.7
$0.7
6Azure Cognitive Services
$2.68
$3.54
7Azure
$2.68
$3.54

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크