메인 콘텐츠로 건너뛰기

Llama 3.1 Instruct 405B

MetaLlama오픈 웨이트Llama 3.1 Community License

설명

Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.

출시일
2024-07-23
파라미터
405.0B
컨텍스트 길이
—
모달리티
text

능력 레이더

80
general
60
coding
90
reasoning
43
science추정
70
agents
0
multimodal

전용 과학 벤치마크가 없을 때 Science는 LLM Stats 과학 점수 또는 추론 능력에서 추정합니다.

랭킹

랭킹 데이터가 없습니다

벤치마크 점수 (LLM Stats)

(LLM Stats (zeroeval))

Chat

IFEvalGoogle Research (2023)88.6%자체 보고

General

BFCL88.5%자체 보고
MMLU87.3%자체 보고
Multipl-E MBPP65.7%자체 보고
Nexus58.7%자체 보고

Language

MMLU (CoT)88.6%자체 보고
Multipl-E HumanEval75.2%자체 보고
MMLU-Pro73.3%자체 보고

Math

GSM8k96.8%자체 보고
Multilingual MGSM (CoT)91.6%자체 보고
MATH73.8%자체 보고

Reasoning

ARC-C96.9%자체 보고
API-Bank92.0%자체 보고
HumanEvalOpenAI (2021)89.0%자체 보고
MBPP EvalPlus88.6%자체 보고
DROP84.8%자체 보고
GPQANYU + Cohere + Anthropic (2023)50.7%자체 보고
Gorilla Benchmark API Bench35.3%자체 보고

AA 평가 지수

(Artificial Analysis)

AA 평가 데이터가 없습니다

LLM Stats 카테고리 점수

(LLM Stats (zeroeval))
Chat
90
Instruction Following
90
Math
90
Structured Output
90
Language
80
Legal
80
Reasoning
80
Finance
80
General
80
Healthcare
80
Tool Calling
70
Code
60
Physics
50
Biology
50
Chemistry
50

가격

가격 데이터가 없습니다

속도

속도 데이터가 없습니다

공급자 가격 순위

프로바이더 데이터가 없습니다

외부 링크