Команда исследователей из «Яндекса», «Сколтеха» и Санкт-Петербургского государственного университета аэрокосмического приборостроения (ГУАП) создали набор данных PackEat для систем компьютерного зрения в ритейле. Он состоит из 100 тыс. снимков фруктов и овощей. Примерно на 9 тыс. из них размечен каждый отдельный объект, указано их количество и общий вес упаковки.

На фотографии в общей сложности попали 370 тыс. овощей и фруктов. Они сняты с разных точек обзора в реальных магазинах и относятся к 34 видам и 65 сортам. В набор вошли изображения объектов с полиэтиленовыми пакетами, пересечением, а также с фоном на прилавках.

PackEat предназначен для решения проблемы ручной идентификации весового товара. С его помощью можно обучить алгоритмы в умных кассах и системах учета. Датасет создан для таких задач компьютерного зрения, как определение вида и сорта продуктов, выделение каждого объекта и подсчет количества товара.

Российские ритейлеры уже используют компьютерное зрение в различных целях. Например, сети «Перекресток» и «Ярче» внедрили такие решения для взвешивания товаров на весах. Во «ВкусВилле» ИИ применяют для распознавания дефектов фруктов и овощей.