Kodify Nano

MERA Создан 16.07.2025 08:57

0.181

Общий результат

Оценки по задачам лидерборда

Таблица скроллится влево

Задача	Результат	Метрика
YABLoCo	0.082 / 0	EM pass@k
stRuCom	0.092	chrF
RealCode	0.041 / 0.988	pass@k execution_success
UnitTests	0.112	CodeBLEU
ruCodeEval	0.191 / 0.313 / 0.354	pass@k
JavaTestGen	0.053 / 0.3	pass@k compile@1
ruHumanEval	0.173 / 0.299 / 0.341	pass@k
RealCodeJava	0.104 / 0.97	pass@k execution_success
CodeLinterEval	0.235 / 0.432 / 0.473	pass@k
ruCodeReviewer	0.005 / 0.043 / 0.003 / 0.003 / 0.003	chrF BLEU judge@1 judge@5 judge@10
CodeCorrectness	0.475	EM

Информация о сабмите

Версия MERA

v.1.0.0

Версия Torch

2.7.0

Версия кодовой базы

e77f33f

Версия CUDA

12.6

Precision весов модели

auto

Сид

1234

Батч

Версия transformers

4.53.0

Количество GPU и их тип

1 x NVIDIA A100-SXM4-40GB

Архитектура

vllm

Команда:

MERA

Название ML-модели:

Kodify Nano

Ссылка на ML-модель:

https://huggingface.co/MTSAIR/Kodify-Nano

Размер модели

1.5B

Тип модели:

Открытая

SFT

Дополнительные ссылки:

Описание архитектуры:

Kodify-Nano – это легковесная LLM, разработанная для выполнения задач разработки кода с минимальными ресурсами. Она оптимизирована для быстрого и эффективного взаимодействия с пользователями, обеспечивая высокую производительность даже в условиях ограниченных ресурсов. Kodify-Nano is a lightweight LLM designed for code development tasks with minimal resource usage. It is optimized for fast and efficient interaction, delivering high performance even in resource-constrained environments.

Описание обучения:

Данные претрейна:

Лицензия:

https://huggingface.co/MTSAIR/Kodify-Nano/blob/main/Apache%20License%20MTS%20AI.docx

Kodify Nano

Оценки по задачам лидерборда

Информация о сабмите

Команда:

Название ML-модели:

Ссылка на ML-модель:

Размер модели

Тип модели:

Дополнительные ссылки:

Описание архитектуры:

Описание обучения:

Данные претрейна:

Лицензия:

Подтвердите удаление сабмита