메인 콘텐츠로 건너뛰기

Llama 2 Chat 7B

MetaLlama

출시일

2023-07-18

파라미터

—

컨텍스트 길이

131K

모달리티

text

능력 레이더

8

general

90

coding

6

reasoning

11

science추정

80

agents

0

multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인	#순위	점수	소스
코딩 랭킹	500	0.0	AA
종합 랭킹	514	8.0	AA
수학 추론	355	0.0	AA
과학	505	8.0	AA

벤치마크 점수 (LLM Stats)

Biology

GPQA

50.5%자체 보고

Code

HumanEval

88.4%자체 보고

Finance

MMLU

86.0%자체 보고

MMLU-Pro

68.9%자체 보고

General

IFEval

92.1%자체 보고

MBPP EvalPlus

87.6%자체 보고

BFCL v2

77.3%자체 보고

Math

MGSM

91.1%자체 보고

MATH

77.0%자체 보고

AA 평가 지수

Intelligence Index

4.3

Gpqa

0.2

Mmlu Pro

0.2

Math 500

0.1

Hle

0.1

Livecodebench

0.0

Scicode

0.0

Aime

0.0

LLM Stats 카테고리 점수

Instruction Following

90

Structured Output

90

Code

90

Language

80

Legal

80

Math

80

Reasoning

80

Finance

80

Healthcare

80

Tool Calling

80

General

70

Physics

50

Biology

50

Chemistry

50

가격

입력 가격$0.05 / 1M 토큰

출력 가격$0.25 / 1M 토큰

혼합 가격 (3:1)$0.1 / 1M 토큰

속도

토큰/초98.3

첫 토큰 지연15.36s

첫 응답 지연15.36s

공급자 가격 순위

공급자 가격 순위

2개 공급자

최저가: Meta최고가: Cloudflare AI Gateway

공급자입력출력

1Meta주요

$0.05

$0.25

2Cloudflare AI Gateway

$0.56

$6.67

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크

Artificial Analysis