Llama 3.3 Instruct 70B
MetaLlamaOpen WeightLlama 3.3 Community License Agreement
설명
Llama 3.3 is a multilingual large language model optimized for dialogue use cases across multiple languages. It is a pretrained and instruction-tuned generative model with 70 billion parameters, outperforming many open-source and closed chat models on common industry benchmarks. Llama 3.3 supports a context length of 128,000 tokens and is designed for commercial and research use in multiple languages.
출시일
2024-12-06
파라미터
70.0B
컨텍스트 길이
131K
모달리티
text
능력 레이더
30
general
19
coding
28
reasoning
32
science추정
80
agents
0
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Code Ranking | 357 | 18.0 | AA |
| General Ranking | 280 | 38.0 | AA |
| Math Reasoning | 280 | 26.0 | AA |
| Science | 334 | 32.0 | AA |
벤치마크 점수 (LLM Stats)
Biology
GPQA
50.5%자체 보고
Code
HumanEval
88.4%자체 보고
Finance
MMLU
86.0%자체 보고
MMLU-Pro
68.9%자체 보고
General
IFEval
92.1%자체 보고
MBPP EvalPlus
87.6%자체 보고
BFCL v2
77.3%자체 보고
Math
MGSM
91.1%자체 보고
MATH
77.0%자체 보고
AA 평가 지수
Intelligence Index14.5
Coding Index10.7
Math Index7.7
Math 5000.8
Mmlu Pro0.7
Gpqa0.5
Ifbench0.5
Aime0.3
Livecodebench0.3
Tau20.3
Scicode0.3
Lcr0.1
Aime 250.1
Hle0.0
Terminalbench Hard0.0
LLM Stats 카테고리 점수
Structured Output90
Code90
Instruction Following90
Tool Calling80
Finance80
Healthcare80
Language80
Legal80
Math80
Reasoning80
General70
Biology50
Chemistry50
Physics50
가격
입력 가격$0.585 / 1M tokens
출력 가격$0.71 / 1M tokens
혼합 가격 (3:1)$0.616 / 1M tokens
속도
토큰/초92.9 tokens/s
첫 토큰 지연0.57s
첫 응답 지연0.57s
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다