Исследовательская группа из Центра искусственного интеллекта «Сколтеха» в сотрудничестве с учеными Самарского университета создали ИИ-модель для автоматической идентификации этапов производственных процессов на основе анализа видеопотоков. Эта разработка позволяет обнаруживать отклонения от установленного технологического процесса и предотвращать возможные аварии.

Промышленная модель специализируется на временном сегментировании видеоматериалов, поступающих с производственных участков. Она способна определять, какой этап операции выполняется в конкретный момент, и автоматически фиксировать события в записи.

Исследователи отметили, что модель обучается на большом массиве неразмеченных видеозаписей, самостоятельно выделяя ключевые признаки без участия разметчиков. Затем проходит дообучение на небольшой размеченной выборке и адаптируется под конкретные задачи.

«Теперь не нужно вручную разбирать сотни часов видео, чтобы обучить нейросеть распознавать производственные этапы <…> Модель будет самостоятельно выделять закономерности в больших объемах необработанного материала. Это позволяет промышленным камерам в реальном времени выявлять отклонения от нормального хода процесса и помогать предотвратить аварийные ситуации», — рассказали представители «Сколтеха».

На следующем этапе команда планирует увеличить количество поддерживаемых сценариев и типов производственных операций, провести тестирование системы на реальных объектах с постоянным мониторингом множества процессов, а также интегрировать решение в комплексные системы интеллектуального видеонаблюдения для промышленного сектора.