Ученые обновили методички для испытаний медицинских систем с ИИ

Специалисты Научно-практического клинического центра диагностики и телемедицинских технологий Департамента здравоохранения Москвы обновили Методические рекомендации для технических и клинических испытаний медизделий с искусственным интеллектом ИИ. В актуальной версии учли практику применения  компьютерного зрения в лучевой диагностике, формирования наборов данных и требований к ним, сообщил центр диагностики.

Методические рекомендации для проведения технических и клинических испытаний медицинского ПО с технологиями искусственного интеллекта были дополнены на основе их практического применения.  Использование данных методик при проведении испытаний нового ПО обеспечивает высокий уровень контроля качества, эффективности и безопасности медизделий на основе ИИ.  Методические рекомендации доступны для всех российских аккредитованных испытательных лабораторий и лицензированных медорганизаций. 

Эксперты центра проверяют применение искусственного интеллекта в лучевой диагностике, разрабатывают алгоритмы и стандарты его использования для различных клинических ситуаций. суммированный опыт позволяет использовать методические указания как руководство при проверке медтехнологий с использованием ИИ.

Как подчеркнул Илья Тыров, заместитель руководителя столичного Департамента здравоохранения, Москва входит в число лидеров по внедрению в здравоохранение программ с  ИИ. До внедрения в практику  программы на основе нейросетей проходят весь комплекс испытаний для подтверждения безопасности и точности при использовании в медицине, а также получения госрегистрации. «Решающую роль в этом процессе играют методики проведения подобных тестирований. Чтобы процесс испытаний был более точным, объективным и прозрачным, ученые Москвы разработали методические рекомендации для технических и клинических испытаний систем искусственного интеллекта. Они не имеют аналогов», – пояснил Илья Тыров.

За основу первых МР, разработанных в 2019 году были больше взяты теоретические знания об испытаниях. Преимуществом новой редакции являются знания о практическом опыте применения систем с ИИ на протяжении нескольких лет, а также   последние требования нормативных актов.  

 С 1 января 2024 года в России вступили в силу 3 новых национальных предстандарта по использованию ИИ в медицине. Они направлены на совершенствование испытания нейросетей и продуктов на основе ИИ для лучевой диагностики и учебных платформ.  

По данным на декабрь 2023 года, результаты проверки работы систем с ИИ в московских больницах показали, что ошибки были выявлены примерно в 15%   сервисов, применяемых для «чтения» диагностических изображений.  

Ученые, эксперты и практики на недавнем форуме ПМЭФ-2014 обсуждали, насколько быстрым будет внедрение систем с ИИ в практику здравоохранения, какие врачебные задачи под силу ему решать, а какие нет.