Холдинг VK внедрит в «VK Видео», «Дзен» и «Медиапроекты Mail» (набор из 15 медиаресурсов) собственный поиск на основе ИИ — Discovery AI. С его помощью пользователи смогут подбирать контент и получать ответы на вопросы от генеративного ИИ.

Discovery AI работает на базе собственной большой языковой модели от VK. В ее основе — веса Open Source LLM, которые были адаптированы и дообучены инженерами AI VK, и собственные разработки компании.

Создание Discovery AI велось в четыре этапа. На первом инженеры объединили классический поиск по ключевым словам и семантический поиск, который понимает смысл пользовательского запроса и позволяет находить релевантную информацию даже без точных совпадений.

На втором — обучили собственные ML-модели, отвечающие за качество поиска, сформировав обучающие датасеты на основе 5 млрд синтетических пользовательских запросов и более 1 млрд разметок релевантности. На этих данных были обучены модели, определяющие, какие фрагменты документов действительно содержат ответ на запрос пользователя.

Затем разработчики оптимизировали производительность системы для работы в высоконагруженных системах и на конечном этапе объединили поиск с большой языковой моделью, которая формирует связную выжимку или объяснение, не опираясь на собственные знания, а используя только информацию из контента сервисов VK.

Дополнительно инженеры реализовали режим Deep Research, в котором система самостоятельно разбивает сложный запрос на несколько подзадач и формирует более подробный ответ.

В июне VK внедрил новые ML-модели в ленту «ВКонтакте» для улучшения рекомендательных систем.