Ученые МГУ им. М.В. Ломоносова совместно с МФТИ, «Сколково», Университетом Иннополис, Первым МГМУ им. И.М. Сеченова, СГМУ, AIRI, НМИЦ им. В.А. Алмазова и «СберЗдоровье» предложили подход оценки диагностических ответов ИИ, который учитывает расхождения во мнениях врачей.

Ученые создали два относительных показателя, которые сопоставляют согласованность ответов модели и врачей со степенью согласованности врачебных заключений между собой. Дополняет их отдельный алгоритм, определяющий, какие формулировки диагнозов считать совпадающими. Для этого он объединяет оценки языковых моделей, данные Международной классификации болезней и признаки сходства текстов.

Подход проверили на 360 русскоязычных диалогах, моделирующих сбор сведений о состоянии пациента. В результате разброс показателей согласованности между врачами оказался выше, чем между большей частью моделей и врачами.

Подход применим при разработке и сопоставлении систем поддержки врачебных решений.

Научная статья опубликована в журнале Scientific Reports.

В июле 2026 года председатель Федерального фонда обязательного медицинского страхования Илья Баланин сообщил о расширении применения искусственного интеллекта в диагностических исследованиях.