ДЗМ оценил перспективность сервисов компьютерного зрения
Научно-практический клинический центр диагностики и телемедицинских технологий Департамента здравоохранения Москвы (ДЗМ) представил «матрицу зрелости» сервисов компьютерного зрения, используемых для анализа медицинских изображений. Специалисты оценивали перспективность искусственного интеллекта (ИИ) по показателям его работы за первый квартал 2024 года. Разработка таких технологий осуществляется в ходе эксперимента ДЗМ, а поставщики услуг периодически получают от Депздрава гранты (их общая сумма уже превысила 100 млн рублей).
Для оценки ИИ были составлены выборки из 80 исследований изображений, отобранных случайным образом с обогащением в сторону исследований с патологией. Специалисты Центра диагностики и телемедицины оценивали стабильность работы программ, а также давали клиническую оценку сервисам, выводимую из сопоставления решений ИИ и заключений врачей-рентгенологов.
По направлению «компьютерная томография органов брюшной полости» эксперты выделили комплексные сервисы, разработанные компаниями «Медицинские скрининг системы» и «Платформа «Третье мнение». ИИ «Цельс» от первой организации не имел технических дефектов в 99,4% случаев, а также продемонстрировал 93,5 единиц соответствия его выводов заключениям врача. «Платформа «Третье мнение» продемонстрировала техническую стабильность в 98,8% анализов и второй показатель на уровне 92,2 единицы.
Сервис Abdomen-IRA от компании «Айра Лабс», получившей самые крупные гранты от ДЗМ за проведенные в ноябре 2023-го – январе 2024 года исследования по разработке технологий в области компьютерного зрения, продемонстрировал техническую стабильность в 98,1% случаев и получил 85,9 единиц за соответствие результатов заключениям врачей.
По направлению «КТ головного мозга» комплексный сервис «Цельс» не имел сбоев в 99% исследований и получил 90,4 балла за точность выявления патологий. ИИ, разработанный компанией «Айрим», также получившей крупные гранты от ДЗМ, оказался стабильнее в техническом плане (99,2% случаев без сбоев), но отстал от конкурента в показателе согласования его решений с заключениями врачей, получив 85,4 балла.
Наибольшие трудности у сервисов компьютерного зрения возникают при анализе медицинских изображений органов грудной клетки – рентгенографий и флюорографий. На исследования ИИ этого направления ДЗМ при выдаче грантов назначает самые большие тарифы – до 28,6 тысячи рублей за один анализ. Сервисы от «Медицинских скрининг систем», «АртВижн» и «Платформы «Третье мнение» демонстрируют высокую техническую стабильность (90,8-100%), но редко совпадают с мнением врачей в выводах – по этому показателю они получают от 58,8 до 75,5 единиц при оптимальном показателе >81 единицы.
По направлению «рентген головы» успешней конкурентов стал ИИ от «Университета Иннополис» – этот сервис для выявления синусита работает стабильно в 92,1% исследований, за соотношение результатов с заключением врачей он получил 89,7 балла.
С рентген-диагностикой заболеваний опорно-двигательной системы лучше остальных сервисов справляется ИИ от «Оксиджен Технолоджиес Рус». За точность выявления патологий он получил 96,9 балла.
В исследовании маммографий сервисы компьютерного зрения, так же как и при анализе рентгенографий и флюорографий органов грудной клетки, пока не могут преодолеть порог оптимального показателя соотношения их выводов с заключением врачей в 81 единицу.
По направлению «магнитно-резонансная томография» наиболее высокие показатели демонстрируют сервисы компании «Имвижн», справляющиеся с выявлением протрузии, грыжи межпозвоночных дисков, стеноза позвоночного канала, рассеянного склероза и интракраниальных новообразований на 81–92,6 балла.
В Центре диагностики и телемедицины ДЗМ Vademecum пояснили, что учреждение выступает организатором эксперимента по использованию технологий в области компьютерного зрения для анализа медицинских изображений, который проводится почти пять лет. «Это крупнейшее в мире проспективное клиническое исследование применимости и качества технологий ИИ в лучевой диагностике», – сообщили в центре.
За исследования, проведенные частными компаниями в ходе эксперимента за ноябрь 2023 – март 2024 года, ДЗМ выплатил более 114,5 млн рублей.