Нейросеть научили расшифровывать рентген легких
07.05.2023
«Обычные модели искусственного интеллекта просто классифицируют снимки и данные, а наша нейросеть благодаря использованию современных моделей машинного зрения и моделей компьютерной лингвистики учится автоматически описывать рентгеновские снимки», — сообщил научный сотрудник Сколтеха Олег Рогов.
Нейросеть состоит из трех разных алгоритмов: первый способен находить патологии на рентгеновских снимках легких, второй — выявлять среди них те, которые чаще всего привлекают внимание профессиональных врачей, а третий может «переводить» результаты работы первых двух на язык, понятный простому человеку и медицинским работникам. В дополнение к этому, ученые создали еще одну версию искусственного интеллекта, в которой первые два компонента были объединены.
Для обучения нейросетей исследователи отобрали 384 тыс. рентгеновских снимков и связанных с ними диагнозов, подготовленных медиками из США. Ученые обработали эти изображения и отметили на них ключевые участки, на которые чаще всего обращают внимание врачи при анализе результатов обследования легких. Команда также подготовила текстовые описания снимков.
«Мы специально составили свой радиологический словарь, чтобы повысить точность с точки зрения именно радиологических терминов, правил их использования в тексте. И, конечно, мы сформировали большую сводную базу рентгеновских снимков для использования в качестве обучающих данных», — добавил Рогов.
Тест системы показал, что обе ее вариации способны в 84-86% случаев выявлять ключевые патологии на снимках и подбирать диагноз, составленный простыми словами. Это позволит использовать их для ускорения диагностики болезней легких при рутинных клинических исследованиях.
Нейросеть научили расшифровывать рентген легких
Нейросеть для автоматического описания рентгеновских снимков создали специалисты Сколтеха. Разработка ускорит постановку диагноза при функциональных исследованиях легких, сообщили в пресс-службе вуза.«Обычные модели искусственного интеллекта просто классифицируют снимки и данные, а наша нейросеть благодаря использованию современных моделей машинного зрения и моделей компьютерной лингвистики учится автоматически описывать рентгеновские снимки», — сообщил научный сотрудник Сколтеха Олег Рогов.
Нейросеть состоит из трех разных алгоритмов: первый способен находить патологии на рентгеновских снимках легких, второй — выявлять среди них те, которые чаще всего привлекают внимание профессиональных врачей, а третий может «переводить» результаты работы первых двух на язык, понятный простому человеку и медицинским работникам. В дополнение к этому, ученые создали еще одну версию искусственного интеллекта, в которой первые два компонента были объединены.
Для обучения нейросетей исследователи отобрали 384 тыс. рентгеновских снимков и связанных с ними диагнозов, подготовленных медиками из США. Ученые обработали эти изображения и отметили на них ключевые участки, на которые чаще всего обращают внимание врачи при анализе результатов обследования легких. Команда также подготовила текстовые описания снимков.
«Мы специально составили свой радиологический словарь, чтобы повысить точность с точки зрения именно радиологических терминов, правил их использования в тексте. И, конечно, мы сформировали большую сводную базу рентгеновских снимков для использования в качестве обучающих данных», — добавил Рогов.
Тест системы показал, что обе ее вариации способны в 84-86% случаев выявлять ключевые патологии на снимках и подбирать диагноз, составленный простыми словами. Это позволит использовать их для ускорения диагностики болезней легких при рутинных клинических исследованиях.