Перейти к основному содержанию
Выпуск №4, 2025
Правовой суверенитет личности в цифровом здравоохранении в эпоху искусственного интеллекта
Выпуск №3, 2025
Цифровое здравоохранение: прогноз на 2025-2030 гг
Выпуск №2, 2025
Цифровые технологии в удаленном мониторинге родов с системой поддержки принятия врачебных решений (СППВР)
Выпуск №1, 2025
Цифровые технологии для укрепления здоровья и профилактики заболеваний у пожилых людей
Выпуск №4, 2024
Компьютерная реконструкция взаимодействия генов, ассоциированных с синдромом Ангельмана
Выпуск №3, 2024
Телемедицина сегодня: тенденции использования телемедицинских консультаций на опыте регионов
Выпуск №2, 2024
Мобильные приложения для психологического благополучия: отношение пользователей и определение требований
Выпуск №1, 2024
Диагноз в эпоху цифровой медицины
Выпуск №4, 2023
Искусственный интеллект в здравоохранении России: сбор и подготовка данных для машинного обучения
Выпуск №3, 2023
Китай как поставщик медицинского оборудования в РФ. Варианты сотрудничества и особенности работы с китайскими поставщиками
Выпуск №2, 2023
Опыт преподавания телемедицины в системе высшего профессионального образования Отношение медицинских работников к телемедицинским технологиям
Выпуск №1, 2023
Новые подходы к диагностическим информационным системам в радиологии Модифицируемые факторы среды помещения: влияние на здоровье человека и цифровой мониторинг Антропоморфные роботы в медицине: варианты технологий и перспективы
Выпуск №4, 2022
Профессиональное выгорание врачей: скрытый кризис здравоохранения. Данные интернет-опроса врачей
Выпуск №3, 2022
Взаимодействие клинической и диагностической медицины. Результаты интернет-опроса врачей
Выпуск №2, 2022
Мобильные приложения для поддержания психического здоровья: обзор оценок пользователей Роботы УЗИ: готовые решения и перспективные направления
Выпуск №1, 2022
Цифровая трансформация патологоанатомической службы как путь повышения качества медицинской помощи
Выпуск №4, 2021
Клинические рекомендации МЗ РФ: готовы ли врачи их выполнять? Результаты интернет-опроса врачей.
Выпуск №3, 2021
Виртуальная реальность (VR) в клинической медицине: международный и российский опыт
Выпуск №2, 2021
Дистанционные консультации пациентов: что изменилось за 20 лет?
Выпуск №1, 2021
Первые результаты участия в пилотном проекте Минздрава России по дистанционному мониторированию артериального давления
Выпуск №4, 2020
Автоматизация процесса выявления у беременных заболевания COVID-19
Выпуск №3, 2020
Дистанционная когнитивно-поведенческая психотерапия стрессового расстройства, связанного с пандемией COVID-19
Выпуск №2, 2020
Дистанционное образование в медицинском вузе в период пандемии COVID-19: первый опыт глазами студентов
Выпуск №1, 2020
Технологии продолжительного мониторинга артериального давления: перспективы практического применения Телемедицинские технологии в армии Китая
Выпуск №1-2, 2019
Роль искусственного интеллекта в медицине Информационная система поддержки принятия врачебных решений
Выпуск №3, 2018 год
II Всероссийский форум по телемедицине, цифровизации здравоохранения и медицинскому маркетингу «ТЕЛЕМЕДФОРУМ 2019» Эффективность телемедицинских консультаций «пациент-врач» Телереабилитация: рандомизированное исследование исходов
Номер №1-2, 2018
Ответственность при использовании телемедицины: врач или юрист Скрининг меланомы: искусственный интеллект, mHealth и теледерматология
Номер №3, 2017
Телемедицинские технологии для службы лучевой диагностики Москвы
Номер №2, 2017
Первичная телемедицинская консультация «пациент-врач»: первая систематизация методологии
Номер №1, 2017
1. Систематический обзор применения интернет-мессенджеров в телемедицине 2. Телемедицина и социальные сети в борьбе с наркозависимостью
Номер №1, 2016 (Пилотный выпуск)
1. Систематический обзор эффективности и значимости носимых устройств в  практическом здравоохранении 2. Организация виртуальных посещений отделений интенсивной терапии..
Номер №1, 2015 (Пилотный выпуск)
1. Телеассистирование в диагностике и лечении урологических заболеваний 2. Телемониторинг пациентов с кистозным фиброзом: результаты 10 лет работы

Слабые стороны искусственного интеллекта в медицине

DOI: 10.29188/2712-9217-2021-7-2-50-52
Для цитирования: Шадеркин И.А. Слабые стороны искусственного интеллекта в медицине. Российский журнал телемедицины и электронного здравоохранения 2021;7(2):50-52; https://doi.org/10.29188/2712-9217-2021-7-2-50-52
Шадеркин И.А.
Сведения об авторах:

Шадеркин И.А. – к.м.н., заведующий лабораторией электронного здравоохранения Института цифровой медицины Первого Московского государственного медицинского университета им. И.М. Сеченова; Москва, Россия; РИНЦ Author ID 695560

12148
Скачать PDF

ВВЕДЕНИЕ

В последнее время стало появляться большое количество интеллектуальных систем, которые используются в поддержке принятия врачебных решений – симптом-чекеры (приложения проверки симптомов заболеваний), предиктивные, аналитические системы, системы, работающие с визуальными данными (рентген-, КТ-изображения, морфология, дерматография и др.). Все эти решения в обиходе часто называют «искусственный интеллект в медицине» – тематика находится на высоте внимания государства, инвесторов и разработчиков. Эти интеллектуальные системы начинают регистрироваться как медицинские изделия, так, например, в РФ уже есть преценденты («Третье мнение», WEBIOMED).

Автор публикации тоже работает над вопросами принятия врачебных решений, и, сам будучи врачом, в ходе работы и имеющейся практики обнаружил ряд важных вопросов, которыми счел необходимым поделиться с профессиональным сообществом.

КЛЮЧЕВЫЕ МОМЕНТЫ РАЗРАБОТКИ ИИ

В основе решений на базе искусственного интеллекта (ИИ – «intelligence» (франц.), интеллект) лежат медицинские знания – об организме человека, этиологии, патогенезе, диагностике и методах лечения заболеваний.

Команды, создающие решения на базе ИИ, включают в себя, помимо руководства и представителей бизнеса (сэйлс, маркетинг), команду разработчиков, программистов и специалистов по знаниям, дата-сайентистов, которые, как правило, являются представителями медицинского и научного сообщества и являются экспертами в предметной области, для которой строятся решения на базе ИИ.

Важным компонентом бизнес-продукта являются медицинские данные (знания), которые либо берутся из открытых источников (дата-сеты, размеченные данные), либо собираются дата-сайентистами из команды разработчиков. Созданное программное обеспечение принимает решение на основе данных/знаний, поэтому качество этих данных является ключевым аспектом правильности работы программного обеспечения.

В некоторых случаях демонстрация успешной работы программного обеспечения в заявленных характеристиках (чувствительность, специфичность) происходит лишь в «надежных руках» разработчиков и на данных, которые лежат в основе программного обеспечения. При попытке продемонстрировать работу в клинических ситуациях заявленные характеристики часто не достигаются, поэтому у клинического сообщества, которое должно использовать это решение на базе ИИ, формируется не всегда благоприятное мнение.

ПРИЧИНЫ НЕУДАЧ В СИСТЕМЕ ПРИНЯТИЯ ВРАЧЕБНЫХ РЕШЕНИЙ

Есть очевидные и наиболее часто упоминаемые причины некачественной работы вне заявленных характеристик ИИ в медицине:

  1. Ошибки в использовании программных библиотек.
  2. Некачественно собранные медицинские данные.
  3. Недостаточное количество данных или выборки данных для обучения алгоритма.
  4. Нерепрезентативная выборка (не все данные, не по всем клиническим случаям оказались в дата-сете).
  5. Ошибки в разработке программного продукта.

Это лежащие на поверхности, часто упоминаемые причины.

Однако есть ряд других причин, которые порой не учитываются в разработке, но могут носить фатальный характер в принятии медицинских клинических решений:

1. Искажение первичных медицинских знаний.

  • Приверженность эксперта дата-сайентиста к устоявшейся точке зрения в предметной области, которая продиктована личным опытом и сложившимся стереотипом клинического мышления, либо приверженностью к определенной «Школе».
  • Искажение знаний, полученных в ходе клинических исследований.
  • Публикации в научной литературе изначально в своем большинстве подтверждают первоначальную гипотезу исследователей.
  • Данные с отрицательными результатами клинических исследований обычно не публикуются.
  • Публикация отрицательного опыта клинической практики, врачебных ошибок, неудач лечения является сложным с этической и юридической точек зрения. Врачи редко говорят о своих ошибках на страницах высокорейтинговых научных журналов.
  • «Заказной» характер клинических исследований – за многими исследованиями с «правильным дизайном» (построенном по всем правилам медицины, основанной на доказательствах) стоят заказчики – представители медицинской индустрии, которые заинтересованы в подтверждении своей первоначальной гипотезы.
  • В силу бизнес-интереса проводимых исследований на них выделяется значительное финансирование, которого хватает на «правильный дизайн» исследования, создание рабочей группы, включение в исследование пациентов, аналитику и публикацию в высокорейтинговых научных журналах.
  • Эти правильно построенные клинические исследования влияют на клинические рекомендации, референсные значения физиологических показателей. Так, например, под влиянием подобных клинических исследований были изменены референсные показатели артериального давления (АД), сахара крови, эректильной дисфункции (МИЭФ-5).

2. Отсутствие знаний или недостоверные знания о предметной области.

  • Кто занимается реальной клинической практикой, понимает, что не всегда эффективны те или иные методы диагностики, лечения, базирующиеся на клинических рекомендациях, что может говорить о недостаточном уровне знаний о состоянии организма человека, неправильной интерпретации протекающих патологических процессоров, приводящих к заболеванию и неправильном подходе к их лечению.
  • Во многом врачи-практики связывают это с недостаточными знаниями и пытаются формировать собственные индивидуальные подходы к поведению в той или иной ситуации («авторские» схемы лечения, собственные клинические Школы).

На приеме практически нет возможности сказать пациенту, что врач не знает какой ставить диагноз или как его лечить. Сложилось мнение, что пациент всегда должен выйти от врача с решением своей проблемы. С другой стороны, это дополнительно продиктовано взглядом СМИ на текущее состояние науки и здравоохранения, когда в СМИ представляются абсолютные знания и современное состояние проблем. На этом фоне очень сложно специалисту, который несет юридическую ответственность, сказать, что он не знает или не уверен в диагнозе или методах лечения.

3. Социальные искажения.

  • Перспективность применения к пациенту того или иного метода, использование дорогостоящих методов диагностики и лечения, прогноз развития заболевания, эвтаназия, личное отношение врача к пациенту и другие моменты – лежат за рамками медицины, основанной на доказательствах. Принятие решения врачом в таких ситуациях носит иррациональный характер и лежит в рамках этических, культурных, а порой и религиозных аспектов. Такие знания очень сложно на сегодняшнем уровне собрать, классифицировать и алгоритмизировать. Как правило, решения принимает врач на свой страх и риск, под свою ответственность, не афиширует, и тем более, не публикует.

В ряде клинических ситуаций принятие врачом таких решений носит ключевой характер, но не может быть протоколировано и алгоритмизировано в программном обеспечении в ИИ.

ВЫВОДЫ

При разработке решений на базе ИИ кажется важно учитывать вышеперечисленные моменты как разработчикам, так и пользователям.

Прикрепленный файл Размер
Скачать статью 118.47 КБ