Llama 3.1 Instruct 8B

MetaLlama오픈 웨이트Llama 3.1 Community License

설명

Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.

출시일

2024-07-23

파라미터

8.0B

컨텍스트 길이

131K

모달리티

text

능력 레이더

general

coding

reasoning

science

agents

multimodal

랭킹

도메인	#순위	점수	소스
코딩 랭킹	506	10.0	AA
종합 랭킹	492	22.0	AA
과학	528	16.0	AA

벤치마크 점수 (LLM Stats)

(LLM Stats (zeroeval))

Biology

GPQANYU + Cohere + Anthropic (2023)

30.4%자체 보고

Code

HumanEvalOpenAI (2021)

72.6%자체 보고

Gorilla Benchmark API Bench

8.2%자체 보고

Finance

MMLU (CoT)

73.0%자체 보고

MMLU

69.4%자체 보고

MMLU-Pro

48.3%자체 보고

General

ARC-C

83.4%자체 보고

IFEvalGoogle Research (2023)

80.4%자체 보고

BFCL

76.1%자체 보고

MBPP EvalPlus (base)

72.8%자체 보고

Multipl-E MBPP

52.4%자체 보고

Multipl-E HumanEval

50.8%자체 보고

Nexus

38.5%자체 보고

Math

GSM-8K (CoT)

84.5%자체 보고

Multilingual MGSM (CoT)

68.9%자체 보고

DROP

59.5%자체 보고

MATH (CoT)

51.9%자체 보고

Reasoning

API-Bank

82.6%자체 보고

AA 평가 지수

(Artificial Analysis)

Intelligence Index(Artificial Analysis)

7.4

Coding Index(Artificial Analysis)

5.4

Math Index(Artificial Analysis)

4.3

Math 500(OpenAI (2024), subset of Hendrycks et al. MATH (2021))

0.5

Mmlu Pro(TIGER-Lab (Univ. of Waterloo, Toronto, CMU, 2024))

0.5

Ifbench(Google Research (2023))

0.3

Gpqa(NYU + Cohere + Anthropic (2023))

0.3

Lcr(Artificial Analysis)

0.2

Tau2(Sierra + U Toronto + Vector Institute (2025))

0.2

Scicode(UIUC + Argonne National Lab (2024))

0.1

Livecodebench(UC Berkeley + MIT + Cornell (2024))

0.1

Aime(MAA (Mathematical Association of America))

0.1

Hle(Center for AI Safety + Scale AI (2025))

0.1

Aime 25(MAA (Mathematical Association of America))

0.0

Terminalbench V2 1

0.0

Terminalbench Hard(Stanford × Laude Institute (2026))

0.0

LLM Stats 카테고리 점수

(LLM Stats (zeroeval))

Structured Output

Instruction Following

Legal

Math

Reasoning

Language

Finance

General

Healthcare

Tool Calling

Code

Physics

Biology

Chemistry

가격

입력 가격$0.02 / 1M 토큰

출력 가격$0.05 / 1M 토큰

혼합 가격 (3:1)$0.028 / 1M 토큰

캐시 읽기 가격$0.025 / 1M 토큰

속도

토큰/초0.0

첫 토큰 지연0.00s

첫 응답 지연0.00s

공급자 가격 순위

1개 공급자

공급자입력출력

1Meta주요

$0.02

$0.05

이 모델의 다양한 API 공급자 간 가격 비교.

외부 링크

LLM Stats Artificial Analysis