Llama 3.1 Instruct 70B

MetaLlama오픈 웨이트Llama 3.1 Community License

설명

Llama 3.1 70B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks.

출시일

2024-07-23

파라미터

70.0B

컨텍스트 길이

131K

모달리티

text

능력 레이더

general

coding

reasoning

science

agents

multimodal

랭킹

도메인	#순위	점수	소스
코딩 랭킹	473	13.0	AA
종합 랭킹	439	28.0	AA
과학	432	29.0	AA

벤치마크 점수 (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)

41.7%자체 보고

Code

HumanEvalOpenAI (2021)

80.5%자체 보고

Gorilla Benchmark API Bench

29.7%자체 보고

Finance

MMLU (CoT)

86.0%자체 보고

MMLU

83.6%자체 보고

MMLU-Pro

66.4%자체 보고

General

ARC-C

94.8%자체 보고

IFEvalGoogle Research (2023)

87.5%자체 보고

MBPP ++ base version

86.0%자체 보고

BFCL

84.8%자체 보고

Multipl-E HumanEval

65.5%자체 보고

Multipl-E MBPP

62.0%자체 보고

Nexus

56.7%자체 보고

Math

GSM-8K (CoT)

95.1%자체 보고

Multilingual MGSM (CoT)

86.9%자체 보고

DROP

79.6%자체 보고

MATH (CoT)

68.0%자체 보고

Reasoning

API-Bank

90.0%자체 보고

AA 평가 지수

(Artificial Analysis)

Intelligence Index(Artificial Analysis)

6.5

Math Index(Artificial Analysis)

4.0

Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))

0.7

Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))

0.6

Gpqa(NYU + Cohere + Anthropic (2023))

0.4

Ifbench(Google Research (2023))

0.3

Scicode(UIUC + Argonne National Lab (2024))

0.3

Livecodebench(UC Berkeley + MIT + Cornell (2024))

0.2

Aime(MAA (Mathematical Association of America))

0.2

Tau2(Sierra + U Toronto + Vector Institute (2025))

0.2

Lcr(Artificial Analysis)

0.1

Hle(Center for AI Safety + Scale AI (2025))

0.0

Aime 25(MAA (Mathematical Association of America))

0.0

Terminalbench Hard(Stanford × Laude Institute (2026))

0.0

LLM Stats 카테고리 점수

(LLM Stats (zeroeval))

Instruction Following

Structured Output

Language

Legal

Math

Finance

Healthcare

Reasoning

General

Tool Calling

Code

Physics

Biology

Chemistry

가격

입력 가격$0.56 / 1M 토큰

출력 가격$0.56 / 1M 토큰

혼합 가격 (3:1)$0.56 / 1M 토큰

속도

토큰/초0.0

첫 토큰 지연0.00s

첫 응답 지연0.00s

공급자 가격 순위

3개 공급자

최저가: OpenRouter최고가: Meta

공급자입력출력

1OpenRouter최저가

$0.4

2Kilo Gateway

$0.4

3Meta주요

$0.56

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크

LLM Stats Artificial Analysis