Для оценки ИИ были составлены выборки из 80 исследований изображений, отобранных случайным образом с обогащением в сторону исследований с патологией. Специалисты Центра диагностики и телемедицины оценивали стабильность работы программ, а также давали клиническую оценку сервисам, выводимую из сопоставления решений ИИ и заключений врачей-рентгенологов.
По направлению «компьютерная томография органов брюшной полости» эксперты выделили комплексные сервисы, разработанные компаниями «Медицинские скрининг системы» и «Платформа «Третье мнение». ИИ «Цельс» от первой организации не имел технических дефектов в 99,4% случаев, а также продемонстрировал 93,5 единиц соответствия его выводов заключениям врача. «Платформа «Третье мнение» продемонстрировала техническую стабильность в 98,8% анализов и второй показатель на уровне 92,2 единицы.
Сервис Abdomen-IRA от компании «Айра Лабс», получившей самые крупные гранты от ДЗМ за проведенные в ноябре 2023-го – январе 2024 года исследования по разработке технологий в области компьютерного зрения, продемонстрировал техническую стабильность в 98,1% случаев и получил 85,9 единиц за соответствие результатов заключениям врачей.
По направлению «КТ головного мозга» комплексный сервис «Цельс» не имел сбоев в 99% исследований и получил 90,4 балла за точность выявления патологий. ИИ, разработанный компанией «Айрим», также получившей крупные гранты от ДЗМ, оказался стабильнее в техническом плане (99,2% случаев без сбоев), но отстал от конкурента в показателе согласования его решений с заключениями врачей, получив 85,4 балла.
Наибольшие трудности у сервисов компьютерного зрения возникают при анализе медицинских изображений органов грудной клетки – рентгенографий и флюорографий. На исследования ИИ этого направления ДЗМ при выдаче грантов назначает самые большие тарифы – до 28,6 тысячи рублей за один анализ. Сервисы от «Медицинских скрининг систем», «АртВижн» и «Платформы «Третье мнение» демонстрируют высокую техническую стабильность (90,8-100%), но редко совпадают с мнением врачей в выводах – по этому показателю они получают от 58,8 до 75,5 единиц при оптимальном показателе >81 единицы.
По направлению «рентген головы» успешней конкурентов стал ИИ от «Университета Иннополис» – этот сервис для выявления синусита работает стабильно в 92,1% исследований, за соотношение результатов с заключением врачей он получил 89,7 балла.
С рентген-диагностикой заболеваний опорно-двигательной системы лучше остальных сервисов справляется ИИ от «Оксиджен Технолоджиес Рус». За точность выявления патологий он получил 96,9 балла.
В исследовании маммографий сервисы компьютерного зрения, так же как и при анализе рентгенографий и флюорографий органов грудной клетки, пока не могут преодолеть порог оптимального показателя соотношения их выводов с заключением врачей в 81 единицу.
По направлению «магнитно-резонансная томография» наиболее высокие показатели демонстрируют сервисы компании «Имвижн», справляющиеся с выявлением протрузии, грыжи межпозвоночных дисков, стеноза позвоночного канала, рассеянного склероза и интракраниальных новообразований на 81–92,6 балла.
В Центре диагностики и телемедицины ДЗМ Vademecum пояснили, что учреждение выступает организатором эксперимента по использованию технологий в области компьютерного зрения для анализа медицинских изображений, который проводится почти пять лет. «Это крупнейшее в мире проспективное клиническое исследование применимости и качества технологий ИИ в лучевой диагностике», – сообщили в центре.
За исследования, проведенные частными компаниями в ходе эксперимента за ноябрь 2023 – март 2024 года, ДЗМ выплатил более 114,5 млн рублей.
