Ученые Института искусственного интеллекта AIRI представили бенчмарк для языковых моделей STEPS, основанный на комбинации базовых химических задач. Среди них — определение продуктов реакций, предсказание их свойств и генерация описаний молекул по формуле. ИИ должен определить, какой продукт получится в результате реакции, а также оценить, обладает ли это вещество каким-либо ценным свойством.

Как объяснили разработчики, для решения задач по химии зачастую требуется последовательное решение нескольких связанных между собой вопросов. ИИ не всегда может с этим справиться. Ученые предполагают, что бенчмарк в будущем может стать «основой для исследований в области автоматизации химических рассуждений».

Разработчики проверили с помощью STEPS универсальные языковые и специализированные химические модели. Исследование показало, что первые дают содержательные ответы, вторые уступают по формальным метрикам, но точнее в решении специализированных задач.

Институт искусственного интеллекта AIRI и Томский госуниверситет в июле 2025 года открыли лабораторию для создания лекарств и моделирования свойств химических соединений. Она приступила к разработке ИИ-системы для реального производства в малотоннажной химии.