logo GOAT

GOAT

Датасет для валидации больших языковых моделей

Описание:

GOAT (Generalized Occupational Aptitude Test) представляет собой набор из 10, 3 тыс. нормализованных заданий ЕГЭ по литературе, русскому языку и социологии и предназначен для использования при оценке производительности больших языковых моделей.

Датасет был представлен разработчиками из лаборатории искусственного интеллекта VK Lab в сентябре 2024 года. Доступен как открытое ПО.


Репозитории на GitHub и Hugging Face


👤 Михаил Выродов

👤 Егор Спирин


logo GOAT
Проект запущен:
2024
Последнее обновление:12.11.2025
Главное про цифровые технологии в Москве

Нажимая на кнопку, вы соглашаетесь с политикой конфиденциальности

Что такое ICT.Moscow?

ICT.Moscow — открытая площадка о цифровых технологиях в Москве. Мы создаем наиболее полную картину развития рынка технологий в городе и за его пределами, помогаем бизнесу следить за главными трендами, не упускать возможности и находить новых партнеров.