ГлавнаяЛента

CNews

Яндекс внедрил в своей поиск новую нейротехнологию

25 ноября 2020|
5065

Яндекс перевел свой интернет-поиск на новую технологию анализа текста, базирующуюся на нейросетях-трансформерах. В компании отмечают, что это наиболее значимое событие в данном продукте за последние 10 лет.

Технология YATI (англ. Yet Another Transformer With Improvements, «Еще один трансформер с улучшениями») позволила поиску Яндекса гораздо лучше оценивать смысловую связь между запросами пользователей и содержанием документов в интернете.

По словам разработчиков, трудность, которая возникает на пути к обучению трансформера, — это вычислительная сложность задачи. Новые модели хорошо масштабируются по качеству, но при этом в миллионы раз сложнее, чем те, которые применялись в поиске Яндекса раньше. Поэтому необходим запуск специализированного вычислительного кластера и распределенное обучение на нем. 

Сейчас модель одновременно обучается примерно на 100 ускорителях, которые физически расположены в разных серверах и общаются друг с другом через сеть.

Подробнее о технологии — в блоге компании на Хабре

Подробнее

Расскажите знакомым:

Главное про цифровые технологии в Москве

Нажимая на кнопку, вы соглашаетесь с политикой конфиденциальности

Что такое ICT.Moscow?

ICT.Moscow — открытая площадка о цифровых технологиях в Москве. Мы создаем наиболее полную картину развития рынка технологий в городе и за его пределами, помогаем бизнесу следить за главными трендами, не упускать возможности и находить новых партнеров.


Если не указано иное, материалы доступны по лицензии Creative Commons BY 4.0