logo AIpom

AIpom

Ансамблевая модель

Описание:

Модель предназначена для опредения границ между оригинальными и сгенерированными фрагментами в научных статьях. В ней объединены две нейросети — декодер Mistral-7B-OpenOrca и энкодер DeBERTa-V3-Large. Они с помощью метода LoRA были дообучены на датасете бенчмарка M4. Обучение производилось на графическом процессоре NVIDIA Tesla A100.

Декодер определяет в тексте фрагменты, предположительно сгенерированные искусственным интеллектом. Энкодер уточняет предсказания декодера, классифицируя каждый токен (минимальную единицу текста) и указывая, написан он человеком или ИИ.

Модель была представлена исследователями из НИУ ВШЭ в декабре 2024 года. Доступна как открытое ПО.


Репозиторий на GitHub

Статья в сборнике материалов международного научного соревнования SemEval 2024


👤 Александр Ширнин


Участвует в спецпроектах ICT.Moscow:
logo AIpom
Проект запущен:
2024
Последнее обновление:13.11.2025
Главное про цифровые технологии в Москве

Нажимая на кнопку, вы соглашаетесь с политикой конфиденциальности

Что такое ICT.Moscow?

ICT.Moscow — открытая площадка о цифровых технологиях в Москве. Мы создаем наиболее полную картину развития рынка технологий в городе и за его пределами, помогаем бизнесу следить за главными трендами, не упускать возможности и находить новых партнеров.