Перейти к основному содержанию

Gemma 2 27B

GoogleGemmaOpen WeightGemma · Commercial OK

Описание

Gemma 2 27B IT is an instruction-tuned version of Google's state-of-the-art open language model. Built from the same research and technology as Gemini, it's optimized for dialogue applications through supervised fine-tuning, distillation from larger models, and RLHF. The model excels at text generation tasks including question answering, summarization, and reasoning.

Дата выхода
2024-06-27
Параметры
27.2B
Длина контекста
8K
Модальности
text

Радар способностей

70
general
50
coding
60
reasoning
68
scienceоцен.
0
agents
0
multimodal

Science использует прокси на основе рассуждений, когда специализированные научные бенчмарки недоступны.

Рейтинги

Домен#МестоОценкаИсточник
Reasoning20
86.0
LS

Оценки бенчмарков (LLM Stats)

Code

HumanEval51.8%Сам.

Creativity

Social IQa53.7%Сам.

Finance

MMLU75.2%Сам.

General

ARC-E88.6%Сам.
TriviaQA83.7%Сам.
PIQA83.2%Сам.
ARC-C71.4%Сам.
MBPP0.63 / 100Сам.
AGIEval55.1%Сам.
Natural Questions34.5%Сам.

Language

BoolQ84.8%Сам.
Winogrande83.7%Сам.
BIG-Bench74.9%Сам.

Math

GSM8k74.0%Сам.
MATH42.3%Сам.

Reasoning

HellaSwag86.4%Сам.

Индексы оценки AA

Нет данных AA оценки

Оценки категорий LLM Stats

Finance
80
Healthcare
80
Language
80
Physics
80
General
70
Legal
70
Reasoning
70
Math
60
Code
50
Creativity
50
Psychology
50
Search
30

Цены

Цена ввода$0.65 / 1M tokens
Цена вывода$0.65 / 1M tokens
Смешанная цена (3:1)$0.65 / 1M tokens

Скорость

Нет данных о скорости

Доступные провайдеры

(Внутренние единицы LS)

Нет данных провайдеров

Внешние ссылки