Появился ИИ, который анализирует любые медицинские снимки и сам пишет описание

Специалисты Института искусственного интеллекта Университета Иннополис разработали универсальную ИИ‑систему для анализа медицинских изображений. Прототип получил название «Инновит». Он умеет находить патологии на снимках, выделять их и формировать текстовое описание, похожее на то, которое написал бы врач‑рентгенолог.

Большинство существующих медицинских нейросетей узкоспециализированы. Одна модель работает только с КТ головного мозга, другая — с рентгеном легких, третья ищет только пневмонию или рак. Чтобы охватить все типы исследований, врачу пришлось бы использовать целый набор таких систем. Это дорого и сложно в обслуживании.

Как объяснили в университете, их разработка решает сразу несколько задач. «Инновит» может находить все патологии на изображении, выделять конкретные рентгенологические признаки, искать определенный тип изменений, например жидкость в плевральной полости. А еще система способна сгенерировать полное текстовое описание снимка.

В основе прототипа лежит фундаментальная модель компьютерного зрения Florence‑2. Ее дообучили на базе из более чем 100 тысяч медицинских изображений — КТ, МРТ, рентгена, УЗИ и маммографии. В выборку вошли все анатомические зоны и полный спектр патологий. Для обучения разработали новую функцию потерь.

Над проектом работала междисциплинарная команда: специалисты по машинному обучению, инженеры данных и клинические эксперты.

В ближайших планах разработчиков — расширить базу данных для дообучения, включив сложные клинические случаи. Также модель планируют интегрировать с большими языковыми моделями, чтобы она могла учитывать предыдущие исследования пациента и данные из медкарты. Это повысит точность диагностики.

От зарубежных аналогов разработка отличается более легкой архитектурой и новой функцией потерь. Это делает систему эффективнее в вычислениях и дешевле в обслуживании и обновлении, говорят создатели.

Читать далее:

Вселенная внутри черной дыры: наблюдения «Уэбба» подтверждают странную гипотезу

Испытания ракеты Starship Илона Маска вновь закончились взрывом в небе

Сразу четыре похожих на Землю планеты нашли у ближайшей одиночной звезды

^{Обложка: freepik}

The post Появился ИИ, который анализирует любые медицинские снимки и сам пишет описание appeared first on Хайтек.