메인 콘텐츠로 건너뛰기

Llama 3 Instruct 8B

MetaLlama
출시일
2024-04-18
파라미터
컨텍스트 길이
131K
모달리티
text

능력 레이더

14
general
10
coding
21
reasoning
19
science추정
80
agents
0
multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인#순위점수소스
코딩 랭킹483
3.0
AA
종합 랭킹498
12.0
AA
수학 추론292
24.0
AA
과학455
17.0
AA

벤치마크 점수 (LLM Stats)

Biology

GPQA50.5%자체 보고

Code

HumanEval88.4%자체 보고

Finance

MMLU86.0%자체 보고
MMLU-Pro68.9%자체 보고

General

IFEval92.1%자체 보고
MBPP EvalPlus87.6%자체 보고
BFCL v277.3%자체 보고

Math

MGSM91.1%자체 보고
MATH77.0%자체 보고

AA 평가 지수

Intelligence Index
1.2
Math 500
0.5
Mmlu Pro
0.4
Gpqa
0.3
Ifbench
0.2
Scicode
0.1
Livecodebench
0.1
Hle
0.1
Aime
0.0
Lcr
0.0
Terminalbench Hard
0.0
Tau2
0.0

LLM Stats 카테고리 점수

Structured Output
90
Instruction Following
90
Code
90
Math
80
Reasoning
80
Language
80
Legal
80
Finance
80
Healthcare
80
Tool Calling
80
General
70
Physics
50
Biology
50
Chemistry
50

가격

입력 가격$0.045 / 1M 토큰
출력 가격$0.145 / 1M 토큰
혼합 가격 (3:1)$0.07 / 1M 토큰

속도

토큰/초88.4
첫 토큰 지연0.49s
첫 응답 지연0.49s

공급자 가격 순위

공급자 가격 순위

11개 공급자

최저가: Kilo Gateway최고가: Azure
공급자입력출력
1Kilo Gateway최저가
$0.03
$0.04
2NovitaAI
$0.04
$0.04
3Meta주요
$0.045
$0.145
4Cloudflare AI Gateway
$0.12
$0.27
5OpenRouter
$0.14
$0.14
6Helicone
$0.14
$0.14
7LLM Gateway
$0.14
$0.14
8Together AI
$0.14
$0.14
9DigitalOcean
$0.198
$0.198
10Azure Cognitive Services
$0.3
$0.61
11Azure
$0.3
$0.61

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크