मुख्य सामग्री पर जाएं
AITier

Claude 3.5 Sonnet

AnthropicClaudeProprietary

विवरण

Claude 3.5 Sonnet is a powerful AI model with industry-leading software engineering skills. It excels in coding, planning, and problem-solving, with significant improvements in agentic coding and tool use tasks. The model includes computer use capabilities in public beta, allowing it to interact with computer interfaces like a human user.

रिलीज़ तिथि
2024-10-22
पैरामीटर
—
संदर्भ लंबाई
—
मोडैलिटीज़
image, text

क्षमता रडार

80
general
70
coding
90
reasoning
60
scienceअनुमानित
60
agents
100
multimodal

समर्पित विज्ञान बेंचमार्क उपलब्ध न होने पर Science तर्क प्रॉक्सी का उपयोग करके अनुमान लगाता है।

रैंकिंग

डोमेन#रैंकस्कोरस्रोत
Agents & Tools99
18.0
LS
Multimodal Ranking1
94.0
LS

बेंचमार्क स्कोर (LLM Stats)

Agents

OSWorld Extended22.0%स्वयं
OSWorld Screenshot-only14.9%स्वयं

Biology

GPQA67.2%स्वयं

Code

HumanEval93.7%स्वयं
SWE-Bench Verified49.0%स्वयं

Communication

TAU-bench Retail69.2%स्वयं
TAU-bench Airline46.0%स्वयं

Finance

MMLU90.4%स्वयं
MMLU-Pro77.6%स्वयं

General

MMMU68.3%स्वयं

Image To Text

DocVQA95.2%स्वयं

Language

BIG-Bench Hard93.1%स्वयं

Math

GSM8k96.4%स्वयं
MGSM91.6%स्वयं
DROP87.1%स्वयं
MATH78.3%स्वयं
MathVista67.7%स्वयं

Multimodal

AI2D94.7%स्वयं
ChartQA90.8%स्वयं

AA मूल्यांकन सूचकांक

कोई AA मूल्यांकन डेटा उपलब्ध नहीं

LLM Stats श्रेणी स्कोर

Image To Text
100
Language
90
Math
90
Vision
80
Finance
80
General
80
Healthcare
80
Legal
80
Multimodal
80
Reasoning
80
Biology
70
Chemistry
70
Code
70
Physics
70
Tool Calling
60
Communication
60
Frontend Development
50

मूल्य निर्धारण

कोई मूल्य डेटा उपलब्ध नहीं

गति

कोई गति डेटा उपलब्ध नहीं

उपलब्ध प्रदाता

(LS आंतरिक इकाइयाँ)

कोई प्रदाता डेटा उपलब्ध नहीं

बाहरी लिंक

LLM Stats