Llama 3.1 Instruct 405B
MetaLlama오픈 웨이트Llama 3.1 Community License
설명
Llama 3.1 405B Instruct is a large language model optimized for multilingual dialogue use cases. It outperforms many available open source and closed chat models on common industry benchmarks. The model supports 8 languages and has a 128K token context length.
출시일
2024-07-23
파라미터
405.0B
컨텍스트 길이
—
모달리티
text
능력 레이더
80
general
60
coding
90
reasoning
43
science추정
70
agents
0
multimodal
전용 과학 벤치마크가 없을 때 Science는 LLM Stats 과학 점수 또는 추론 능력에서 추정합니다.
랭킹
랭킹 데이터가 없습니다
벤치마크 점수 (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
88.6%자체 보고
General
BFCL
88.5%자체 보고
MMLU
87.3%자체 보고
Multipl-E MBPP
65.7%자체 보고
Nexus
58.7%자체 보고
Language
MMLU (CoT)
88.6%자체 보고
Multipl-E HumanEval
75.2%자체 보고
MMLU-Pro
73.3%자체 보고
Math
GSM8k
96.8%자체 보고
Multilingual MGSM (CoT)
91.6%자체 보고
MATH
73.8%자체 보고
Reasoning
ARC-C
96.9%자체 보고
API-Bank
92.0%자체 보고
HumanEvalOpenAI (2021)
89.0%자체 보고
MBPP EvalPlus
88.6%자체 보고
DROP
84.8%자체 보고
GPQANYU + Cohere + Anthropic (2023)
50.7%자체 보고
Gorilla Benchmark API Bench
35.3%자체 보고
AA 평가 지수
(Artificial Analysis)AA 평가 데이터가 없습니다
LLM Stats 카테고리 점수
(LLM Stats (zeroeval))Chat90
Instruction Following90
Math90
Structured Output90
Language80
Legal80
Reasoning80
Finance80
General80
Healthcare80
Tool Calling70
Code60
Physics50
Biology50
Chemistry50
가격
가격 데이터가 없습니다
속도
속도 데이터가 없습니다
공급자 가격 순위
프로바이더 데이터가 없습니다