Представители Sber AI — руководитель исследовательского кластера Мария Тихонова и руководитель направления инференса и бенчмаркинга Computer Operator Завен Мартиросян — выступили на конференции Fall into ML 2026 с докладом о существующих бенчмарках для оценки LLM на русском языке.

Спикеры рассмотрели существующие подходы к созданию таких тестов и разобрали, как организовать воспроизводимое тестирование, избежать типичных ошибок при сравнении моделей и использовать результаты бенчмаркинга.