Llama 3.1 Instruct 8B
MetaLlamaओपन वेटLlama 3.1 Community License
विवरण
Llama 3.1 8B Instruct is a multilingual large language model optimized for dialogue use cases. It features a 128K context length, state-of-the-art tool use, and strong reasoning capabilities.
रिलीज़ तिथि
2024-07-23
पैरामीटर
8.0B
संदर्भ लंबाई
131K
मोडैलिटीज़
text
क्षमता रडार
60
general
40
coding
60
reasoning
26
scienceअनुमानित
50
agents
0
multimodal
समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science का अनुमान LLM Stats विज्ञान स्कोर या तर्क से लगाया जाता है।
रैंकिंग
कोई रैंकिंग डेटा उपलब्ध नहीं
बेंचमार्क स्कोर (LLM Stats)
(LLM Stats (zeroeval))Chat
IFEvalGoogle Research (2023)
80.4%स्वयं
General
BFCL
76.1%स्वयं
MMLU
69.4%स्वयं
Multipl-E MBPP
52.4%स्वयं
Nexus
38.5%स्वयं
Language
MMLU (CoT)
73.0%स्वयं
Multipl-E HumanEval
50.8%स्वयं
MMLU-Pro
48.3%स्वयं
Math
GSM-8K (CoT)
84.5%स्वयं
Multilingual MGSM (CoT)
68.9%स्वयं
MATH (CoT)
51.9%स्वयं
Reasoning
ARC-C
83.4%स्वयं
API-Bank
82.6%स्वयं
MBPP EvalPlus (base)
72.8%स्वयं
HumanEvalOpenAI (2021)
72.6%स्वयं
DROP
59.5%स्वयं
GPQANYU + Cohere + Anthropic (2023)
30.4%स्वयं
Gorilla Benchmark API Bench
8.2%स्वयं
AA मूल्यांकन सूचकांक
(Artificial Analysis)कोई AA मूल्यांकन डेटा उपलब्ध नहीं
LLM Stats श्रेणी स्कोर
(LLM Stats (zeroeval))Chat80
Instruction Following80
Structured Output80
Language60
Legal60
Math60
Reasoning60
Finance60
General60
Healthcare60
Tool Calling50
Code40
Physics30
Biology30
Chemistry30
मूल्य निर्धारण
इनपुट मूल्य$0.035 / 1M टोकन
आउटपुट मूल्य$0.065 / 1M टोकन
मिश्रित मूल्य (3:1)$0.025 / 1M टोकन
गति
टोकन/सेकंड141.3
पहले टोकन में देरी0.87s
पहले उत्तर में देरी0.87s
प्रदाता मूल्य रैंकिंग
प्रदाता मूल्य रैंकिंग
2 प्रदाता
सबसे सस्ता: DeepInfraसबसे महंगा: Meta
प्रदाताइनपुटआउटपुट
1DeepInfraसबसे सस्ता
$0.02
$0.04
2Metaप्राथमिक
$0.035
$0.065
इस मॉडल के लिए विभिन्न API प्रदाताओं के मूल्य निर्धारण की तुलना करें।