Таблица скроллится влево
| Борд | Результат | Attempted Score | Coverage | Место в рейтинге |
|---|---|---|---|---|
| Мульти | 0.5 | 0.563 | 0.889 | 2 |
| Изображения | 0.554 | 0.554 | 1 | 2 |
| Аудио | 0.561 | 0.561 | 1 | 2 |
| Видео | 0.41 | 0.615 | 0.667 | - |
Таблица скроллится влево
| Задача | Модальность | Результат | Метрика |
|---|---|---|---|
| WEIRD | 0.741 |
EM
JudgeScore
|
|
| ruSLUn | 0.335 |
EM
F1
|
|
| AQUARIA | 0.73 |
EM
JudgeScore
|
|
| RealVQA | 0.491 |
EM
JudgeScore
|
|
| ruCLEVR | 0.562 |
EM
JudgeScore
|
|
| ruEnvAQA | 0.743 |
EM
JudgeScore
|
|
| LabTabVQA | 0.588 |
EM
JudgeScore
|
|
| ruMathVQA | 0.154 |
EM
JudgeScore
|
|
| RealVideoQA | 0.678 |
EM
JudgeScore
|
|
| ruCommonVQA | 0.709 |
EM
JudgeScore
|
|
| ruHHH-Image | 0.51 |
EM
JudgeScore
|
|
| ruHHH-Video | 0.551 |
EM
JudgeScore
|
|
| ruTiE-Audio | 0.435 |
EM
JudgeScore
|
|
| ruTiE-Image | 0.637 |
EM
JudgeScore
|
|
| UniScienceVQA | 0.224 |
EM
JudgeScore
|
|
| culture | 0.095 / 0.292 | ||
| business | 0.129 / 0.421 | ||
| medicine | 0.094 / 0.318 | ||
| social_sciences | 0.119 / 0.386 | ||
| fundamental_sciences | 0.107 / 0.32 | ||
| applied_sciences | 0.137 / 0.402 | ||
| SchoolScienceVQA | 0.673 |
EM
JudgeScore
|
|
| biology | 0.709 / 0.776 | ||
| chemistry | 0.703 / 0.746 | ||
| physics | 0.749 / 0.824 | ||
| economics | 0.605 / 0.669 | ||
| ru | 0.489 / 0.541 | ||
| all | 0.586 / 0.637 | ||
| ruNaturalScienceVQA | 0.807 |
EM
JudgeScore
|
|
| biology | 0.684 / 0.754 | ||
| chemistry | 0.731 / 0.791 | ||
| physics | 0.778 / 0.874 | ||
| science | 0.902 / 0.927 | ||