logo GOAT

GOAT

Датасет для валидации больших языковых моделей

Описание:

GOAT (Generalized Occupational Aptitude Test) представляет собой набор из 10, 3 тыс. нормализованных заданий ЕГЭ по литературе, русскому языку и социологии и предназначен для использования при оценке производительности больших языковых моделей.

Датасет был представлен и выложен в общий доступ разработчиками из лаборатории искусственного интеллекта VK Lab в сентябре 2024 года.


Репозиторий на GitHub


👤 Михаил Выродов

👤 Егор Спирин


logo GOAT
Проект запущен:
2024
Последнее обновление:12.02.2025
Главное про цифровые технологии в Москве

Нажимая на кнопку, вы соглашаетесь с политикой конфиденциальности

Что такое ICT.Moscow?

ICT.Moscow — открытая площадка о цифровых технологиях в Москве. Мы создаем наиболее полную картину развития рынка технологий в городе и за его пределами, помогаем бизнесу следить за главными трендами, не упускать возможности и находить новых партнеров.



Если не указано иное, материалы доступны по лицензии Creative Commons BY 4.0