메인 콘텐츠로 건너뛰기

Qwen Chat 14B

AlibabaQwen
출시일
2023-09-25
파라미터
컨텍스트 길이
262K
모달리티
audio, image, text, video

능력 레이더

2
general
60
coding
80
reasoning
68
science추정
60
agents
80
multimodal

전용 과학 벤치마크가 없을 때 Science는 추론 프록시를 사용하여 추정합니다.

랭킹

도메인#순위점수소스
종합 랭킹533
2.0
AA

벤치마크 점수 (LLM Stats)

3d

SUNRGBD0.33 / 100자체 보고
Hypersim0.13 / 100자체 보고

Agents

t2-bench81.2%자체 보고
AndroidWorld_SR71.1%자체 보고
BFCL-V467.3%자체 보고
BrowseComp61.0%자체 보고
FullStackBench en58.1%자체 보고
WideSearch57.1%자체 보고
TIR-Bench55.5%자체 보고
FullStackBench zh55.0%자체 보고
OSWorld-Verified54.5%자체 보고
Terminal-Bench 2.040.5%자체 보고
VITA-Bench31.9%자체 보고
DeepPlanning22.8%자체 보고

Biology

GPQA84.2%자체 보고

Chemistry

SuperGPQA63.4%자체 보고

Code

SWE-Bench Verified69.2%자체 보고

Communication

Multi-Challenge60.0%자체 보고

Embodied

EmbSpatialBench0.83 / 100자체 보고

Finance

MMLU-Pro85.3%자체 보고
MMLU-ProX81.0%자체 보고

General

MMLU-Redux93.3%자체 보고
IFEval91.9%자체 보고
C-Eval90.2%자체 보고
MAXIFE86.6%자체 보고
Global PIQA86.6%자체 보고
MMMLU85.2%자체 보고
MMStar81.9%자체 보고
MMMU81.4%자체 보고
Include79.7%자체 보고
MMMU-Pro75.1%자체 보고
LiveCodeBench v674.6%자체 보고
IFBench70.2%자체 보고
LongBench v259.0%자체 보고
SimpleVQA0.58 / 100자체 보고
NOVA-6357.1%자체 보고

Grounding

RefCOCO-avg0.89 / 100자체 보고
ScreenSpot Pro68.6%자체 보고
RefSpatialBench0.64 / 100자체 보고

Healthcare

VideoMMMU80.4%자체 보고
SlakeVQA78.7%자체 보고
PMC-VQA62.0%자체 보고
MedXpertQA61.4%자체 보고

Image To Text

OCRBench91.0%자체 보고

Language

LingoQA79.2%자체 보고
WMT24++76.3%자체 보고

Long Context

MLVU85.6%자체 보고
LVBench71.4%자체 보고
MMLongBench-Doc0.59 / 100자체 보고
AA-LCR58.5%자체 보고

Math

HMMT2589.2%자체 보고
HMMT 202589.0%자체 보고
MathVista-Mini86.2%자체 보고
DynaMath85.0%자체 보고
MathVision83.9%자체 보고
CodeForces0.82 / 3000자체 보고
PolyMATH64.4%자체 보고
Humanity's Last Exam47.4%자체 보고

Multimodal

VLMsAreBlind97.0%자체 보고
V*92.7%자체 보고
AI2D92.6%자체 보고
MMBench-V1.191.5%자체 보고
OmniDocBench 1.589.3%자체 보고
VideoMME w sub.86.6%자체 보고
VideoMME w/o sub.82.5%자체 보고
CC-OCR80.7%자체 보고
CharXiv-R77.5%자체 보고
MVBench74.8%자체 보고
MMVU72.3%자체 보고
BabyVision38.4%자체 보고
ZEROBench-Sub0.34 / 100자체 보고
Nuscene14.6%자체 보고
ZEROBench0.08 / 100자체 보고

Reasoning

CountBench0.98 / 100자체 보고
BrowseComp-zh69.5%자체 보고
Hallusion Bench67.9%자체 보고
ERQA64.8%자체 보고
Seal-041.4%자체 보고
OJBench36.0%자체 보고

Spatial Reasoning

RealWorldQA84.1%자체 보고

Vision

ODinW42.6%자체 보고

AA 평가 지수

Intelligence Index
2.1

LLM Stats 카테고리 점수

Math
80
Physics
80
Structured Output
80
Image To Text
80
Instruction Following
80
Language
80
Legal
80
Embodied
80
Finance
80
General
80
Biology
80
Text-to-image
80
Video
80
Multimodal
70
Reasoning
70
Spatial Reasoning
70
Long Context
70
Frontend Development
70
Grounding
70
Healthcare
70
Chemistry
70
Vision
70
Search
60
Code
60
Communication
60
Economics
60
Tool Calling
60
Agents
50
3d
20
Spatial
10

가격

입력 가격무료
출력 가격무료
혼합 가격 (3:1)무료

속도

토큰/초0.0
첫 토큰 지연0.00s
첫 응답 지연0.00s

공급자 가격 순위

프로바이더 데이터가 없습니다

외부 링크