Gemma 2 27B
GoogleGemmaOpen WeightGemma · Commercial OK
Описание
Gemma 2 27B IT is an instruction-tuned version of Google's state-of-the-art open language model. Built from the same research and technology as Gemini, it's optimized for dialogue applications through supervised fine-tuning, distillation from larger models, and RLHF. The model excels at text generation tasks including question answering, summarization, and reasoning.
Дата выхода
2024-06-27
Параметры
27.2B
Длина контекста
8K
Модальности
text
Радар способностей
70
general
50
coding
60
reasoning
68
scienceоцен.
0
agents
0
multimodal
Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.
Рейтинги
| Домен | #Место | Оценка | Источник |
|---|---|---|---|
| Reasoning | 20 | 86.0 | LS |
Оценки бенчмарков (LLM Stats)
Code
HumanEval
51.8%Сам.
Creativity
Social IQa
53.7%Сам.
Finance
MMLU
75.2%Сам.
General
ARC-E
88.6%Сам.
TriviaQA
83.7%Сам.
PIQA
83.2%Сам.
ARC-C
71.4%Сам.
MBPP
0.63 / 100Сам.
AGIEval
55.1%Сам.
Natural Questions
34.5%Сам.
Language
BoolQ
84.8%Сам.
Winogrande
83.7%Сам.
BIG-Bench
74.9%Сам.
Math
GSM8k
74.0%Сам.
MATH
42.3%Сам.
Reasoning
HellaSwag
86.4%Сам.
Индексы оценки AA
Нет данных AA оценки
Оценки категорий LLM Stats
Finance80
Healthcare80
Language80
Physics80
General70
Legal70
Reasoning70
Math60
Code50
Creativity50
Psychology50
Search30
Цены
Цена ввода$0.65 / 1M tokens
Цена вывода$0.65 / 1M tokens
Смешанная цена (3:1)$0.65 / 1M tokens
Скорость
Нет данных о скорости
Доступные провайдеры
(Внутренние единицы LS)Нет данных провайдеров