Новые линейки русскоязычных бенчмарков

Сбербанк

Исполнительный директор в «Сбере» Алена Феногенова представила на конференции AI R&D Day 2026 линейку из пяти русскоязычных бенчмарков для оценки современных моделей:

  • LIBRA для проверки работы с длинным контекстом;
  • MERA Reason для математических рассуждений;
  • MERA Text 2.0 для испытаний языковые, культурные и прикладные навыки;
  • RUMBA для проверки памяти между сессиями;
  • Harness-bench-fast для тестирования работы в агентной обвязке (Harness).

Кроме того, спикер описал современные тренды в оценке ИИ-моделей.

Расскажите знакомым:

55Дата добавления:02.10.2026
55Дата добавления:02.10.2026
Добавить мою презентацию
на ICT.Moscow
Что такое ICT.Moscow?

ICT.Moscow — открытая площадка о цифровых технологиях в Москве. Мы создаем наиболее полную картину развития рынка технологий в городе и за его пределами, помогаем бизнесу следить за главными трендами, не упускать возможности и находить новых партнеров.