Claude 3.5 Sonnet
AnthropicClaudeProprietary
설명
Claude 3.5 Sonnet is a powerful AI model with industry-leading software engineering skills. It excels in coding, planning, and problem-solving, with significant improvements in agentic coding and tool use tasks. The model includes computer use capabilities in public beta, allowing it to interact with computer interfaces like a human user.
출시일
2024-10-22
파라미터
—
컨텍스트 길이
—
모달리티
image, text
능력 레이더
80
general
70
coding
90
reasoning
60
science추정
60
agents
100
multimodal
전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.
랭킹
| 도메인 | #순위 | 점수 | 소스 |
|---|---|---|---|
| Agents & Tools | 99 | 18.0 | LS |
| Multimodal Ranking | 1 | 94.0 | LS |
벤치마크 점수 (LLM Stats)
Agents
OSWorld Extended
22.0%자체 보고
OSWorld Screenshot-only
14.9%자체 보고
Biology
GPQA
67.2%자체 보고
Code
HumanEval
93.7%자체 보고
SWE-Bench Verified
49.0%자체 보고
Communication
TAU-bench Retail
69.2%자체 보고
TAU-bench Airline
46.0%자체 보고
Finance
MMLU
90.4%자체 보고
MMLU-Pro
77.6%자체 보고
General
MMMU
68.3%자체 보고
Image To Text
DocVQA
95.2%자체 보고
Language
BIG-Bench Hard
93.1%자체 보고
Math
GSM8k
96.4%자체 보고
MGSM
91.6%자체 보고
DROP
87.1%자체 보고
MATH
78.3%자체 보고
MathVista
67.7%자체 보고
Multimodal
AI2D
94.7%자체 보고
ChartQA
90.8%자체 보고
AA 평가 지수
AA 평가 데이터가 없습니다
LLM Stats 카테고리 점수
Image To Text100
Language90
Math90
Vision80
Finance80
General80
Healthcare80
Legal80
Multimodal80
Reasoning80
Biology70
Chemistry70
Code70
Physics70
Tool Calling60
Communication60
Frontend Development50
가격
가격 데이터가 없습니다
속도
속도 데이터가 없습니다
사용 가능한 프로바이더
(LS 내부 단위)프로바이더 데이터가 없습니다