«Яндекс» разработал открытую базовую языковую модель Alice AI Search Pretrain (Alice AI‑T5-35B‑A0.6B). Ее дообученная версия с июля 2026 года используется в ИИ-ответах в «Поиске».

Новое решение — это Encoder‑Decoder‑модель с разреженной MoE‑архитектурой. Как отмечают в «Яндексе», разработчикам не удалось найти современных крупных открытых моделей такого типа. Предыдущая версия решения компании была основана на Encoder‑Decoder‑архитектуре без MoE‑слоев.

Alice AI Search Pretrain содержит 35 млрд параметров, при обработке одного токена задействуется около 600 млн (меньше 2%). Решение обучалось на корпусе данных из 15 трлн токенов.

Главная задача выложенной модели — быстро давать ответы, опираясь на результаты «Поиска». Разработчики отмечают, что она показывает хорошие результаты на бенчмарках фактологичности и работы с контекстом и может быть полезна исследователям в области LLM‑архитектуры.

«Яндекс» в июне 2026 года обновил три работающие в чате ИИ-ассистента «Алиса AI» модели: языковую, мультимодальную и поисковую.