GPT-5.4

MERA Создан 03.04.2026 10:15

Оценки по задачам лидерборда

Таблица скроллится влево

Задача	Результат	Место в рейтинге
Сельское хозяйство	0.759	1
Медицина и здравоохранение	0.834	3

ruTXTAgroBench

Метрика: F1, Exact Match

Дисциплина	Результат
Ботаника	0.89
Общая генетика	0.835
Основы селекции	0.869
Растениеводство	0.735
Общее земледелие	0.73
Мелиоративное земледелие	0.659
Семеноводство и семеноведение	0.74
Кормопроизводство и луговодство	0.674
Системы земледелия на различных агроландшафтах	0.733
Технологии возделывания сельскохозяйственных культур	0.806

ruTXTAquaBench

Метрика: F1, Exact Match

Дисциплина	Результат
Индустриальная аквакультура	0.749
Кормление рыбы и других гидробионтов	0.722
Марикультура. Разведение раков, креветок. Искусственное выращивание жемчуга	0.653
Ихтиопатология: ветеринария, профилактика и оптимизация технологий рыборазведения	0.593

ruTXTMedQFundamental

Метрика: F1, Exact Match

Дисциплина	Результат
Анатомия	0.874
Гигиена	0.8
Гистология	0.811
Биофизика	0.837
Биохимия	0.826
Микробиология	0.833
Биология (паразитология)	0.811
Фармакология	0.848
Факультетская хирургия	0.811
Общая хирургия	0.815
Общая химия	0.744
Нормальная физиология	0.844
Биоорганическая химия	0.819
Патологическая анатомия	0.785
Патофизиология	0.819
Клиническая лабораторная диагностика	0.822
Пропедевтика внутренних болезней	0.848

Информация о сабмите

Версия MERA

v1.0.0

Версия Torch

2.10.0

Версия кодовой базы

0ac3a14

Версия CUDA

12.8

Precision весов модели

auto

Сид

1234

Батч

Версия transformers

4.57.6

Количество GPU и их тип

1 x NVIDIA A100-SXM4-80GB

Архитектура

openai-chat-completions

Команда:

MERA

Название ML-модели:

GPT-5.4

Ссылка на ML-модель:

https://openai.com/ru-RU/index/introducing-gpt-5-4/

Тип модели:

Закрытая

Лицензия:

Proprietary

Параметры инференса

Параметры генерации:
aqua_bench - do_sample=false;until=[];max_gen_toks=32768;reasoning={"enabled":true,"effort":"high","exclude":false}; \nmed_bench - do_sample=false;until=[];max_gen_toks=32768;reasoning={"enabled":true,"effort":"high","exclude":false}; \nagro_bench - do_sample=false;until=[];max_gen_toks=32768;reasoning={"enabled":true,"effort":"high","exclude":false};

GPT-5.4

Оценки по задачам лидерборда

ruTXTAgroBench

ruTXTAquaBench

ruTXTMedQFundamental

Информация о сабмите

Команда:

Название ML-модели:

Ссылка на ML-модель:

Тип модели:

Лицензия:

Параметры инференса

Подтвердите удаление сабмита