ECRI създава нов канал за докладване на инциденти, за да се справи със скритите провали на ИИ и да повиши безопасността на пациентите

Глобалната неправителствена организация за безопасност на пациентите ECRI разширява своята национална мрежа за докладване на проблеми, за да улавя изрично грешки, неизправности и „почти настъпили инциденти“ (near misses), свързани с инструменти с изкуствен интелект (ИИ) и устройства с ИИ функции, използвани при грижата за пациенти. Тази стъпка има за цел да запълни критичен информационен прозорец, тъй като болниците и здравните системи бързо внедряват ИИ за диагностика, триаж, документация и комуникация с пациентите.
Нов канал за проследяване на вреди, свързани с ИИ
В продължение на десетилетия ECRI събира поверителни доклади за проблеми с медицински устройства и здравни ИТ проблеми от лекари на първа линия и здравни организации, разследва ги и споделя извлечените уроци обратно с докладващите обекти и по-широката индустрия. С последното разширение нейната Мрежа за докладване на проблеми (Problem Reporting Network) вече включва специализиран път за инциденти, при които инструмент с ИИ функции може да е допринесъл за грешка, да е генерирал неправилен резултат или да е въвел нови рискове в процеса на лечение.
ECRI призовава доставчиците на здравни услуги, здравните системи и лекарите в САЩ да подават доклади всеки път, когато подозират, че приложение с ИИ е изиграло роля при събитие, засягащо безопасността — независимо дали грешката е достигнала до пациента, или е била уловена предварително като „почти настъпил инцидент“. Докладите могат да обхващат широк спектър от технологии, включително диагностични алгоритми, инструменти за подкрепа на клинични решения, системи за анализ на радиологични изображения, модели за прогнозиране на риск и ИИ-базирани чатботове, използвани за взаимодействие с пациентите.
Недостатъчно докладвани проблеми с ИИ в клиничната практика
Разширението отразява нарастващата загриженост, че проблемите със сигурността, свързани с ИИ, се докладват значително по-малко в сравнение с традиционните откази на устройства. В скорошно проучване на ECRI сред 124 лидери в областите на качеството, безопасността, риска и съответствието (compliance), близо една трета е заявила, че през последната година е срещала резултат от ИИ, който е смятала за неправилен или подвеждащ. Около 9% са заявили, че грешка на ИИ е достигнала до пациент или е повлияла на решение за лечение. ECRI твърди, че без формални механизми за докладване много от тези инциденти остават невидими за надзорните органи и разработчиците на технологии.
ECRI вече е предупреждавала, че неблагоприятните събития, включващи медицински устройства и приложения с ИИ, често се пропускат, защото персоналът може да не осъзнава кога ИИ работи във фонов режим или може да приписва проблемите единствено на човешка грешка или проблеми с работния процес. Насоките на организацията подчертават необходимостта от разпознаване на събития с ИИ, подлежащи на докладване, идентифициране на кои продукти включват ИИ и провеждане на оценки на риска, специфични за устройства с ИИ функции.
Примери за грешки на ИИ, които ECRI иска да бъдат докладвани
Разширената мрежа за докладване е проектирана да улавя спектър от опасения за безопасността, свързани с ИИ, включително:
- Неправилни или подвеждащи резултати, които влияят на диагностични или терапевтични решения, като например неправилна класификация на находки при образна диагностика или неточни оценки на риска.
- Грешни положителни и грешни отрицателни резултати в диагностични инструменти, управлявани от ИИ, дори когато показателите за производителност изглеждат приемливи, ако те допринасят за пропуснато или ненужно лечение.
- Алгоритмична предвзетост, водеща до по-лоша производителност за специфични групи пациенти, включително жени и расови или етнически малцинства.
- Неочаквано поведение или небезопасни препоръки от ИИ чатботове или виртуални асистенти, използвани в клинични работни процеси или при взаимодействие с пациенти.
- Неизправност на системи или сбои при интеграция, при които компоненти с ИИ взаимодействат неправилно с електронни здравни досиета или медицински устройства, причинявайки забавяния, загуба на данни или грешно показване на информация.
Всички доклади, подадени до ECRI, се пазят като поверителни, а услугата е безплатна за участващите организации и лекари. ECRI класифицира и разследва докладите, може да уведомява производителите, когато е уместно, и включва констатациите в своите предупреждения за безопасност, насоки и ресурси за своите членове.
Рисковете от ИИ вече са на върха на програмите за безопасност на ECRI
Разширената мрежа за докладване съответства на по-широката оценка на ECRI, че рисковете, свързани с ИИ, вече са сред най-належащите предизвикателства за безопасността на пациентите. В своя годишен списък на Топ 10 технологични опасности в здравеопазването за 2026 г., ECRI класира злоупотребата с ИИ чатботове в здравеопазването като опасност номер едно, предупреждавайки, че лошо управлявани или неадекватно контролирани чатботове могат да предоставят неточни или небезопасни насоки на пациенти и лекари.
Докладът на ECRI за Основните опасения за безопасността на пациентите за 2026 г. също така идентифицира „Навигация в диагностичното дилема на ИИ“ като водещо опасност за безопасността, цитирайки нарастващия риск от пропуснати, забавени или неправилни диагнози, когато инструменти с ИИ се внедряват без надеждна валидация, управление и клиничен надзор. Организацията препоръчва структурирано регистриране на случаите, в които ИИ предоставя информация за диагностични решения, поддържане на подробни одитни следи и ясни процеси за лекарите да могат да пренебрегват резултатите от ИИ, когато те влизат в конфликт с клиничното преценка.
Как разширената мрежа се вписва в по-широкия надзор
Регулаторните агенции, като Агенцията по храните и лекарствата на САЩ (FDA), поддържат бази данни с неблагоприятни събития и одобрени медицински устройства с ИИ функции, но мрежата за докладване на ECRI предлага допълнителен канал, фокусиран специално върху безопасността на пациентите и практическите въпроси на внедряването. ECRI насърчава организациите да докладват събития, свързани с ИИ, не само в регулаторните бази данни, но и в собствената си система, където инцидентите могат да бъдат анализирани в контекста на по-широките модели на технологични опасности в здравеопазването.
Докладите, подадени чрез разширения път за ИИ, ще се подават в вътрешните бази данни на ECRI и могат да стимулират целеви предупреждения за безопасност, препоръки за практика или по-задълбочени разследвания на специфични продукти или случаи на употреба. С течение на времето ECRI очаква, че по-богатото докладване ще помогне да се количествено определи колко често клиничните инструменти с ИИ генерират неправилни или подвеждащи резултати, кои видове работни процеси са най-уязвими и кои контролни механизми са ефективни при предотвратяването на вреди.
Призив за действие към лекарите и здравните системи
Тъй като внедряването на ИИ се ускорява в радиология, патология, спешен триаж, планиране и съобщения с пациенти, посланието на ECRI към здравните организации е директно: третирайте инцидентите с ИИ като събития за безопасността на пациентите, подлежащи на докладване, и ги подавайте чрез установените канали, включително разширената мрежа на ECRI. Организацията призовава болниците да обучават персонала на първа линия как да разпознават потенциални грешки на ИИ, да ги документират последователно и да ескалират опасенията за преглед.
Чрез систематично улавяне на проблемите, свързани с ИИ — от фини неправилни класификации до големи диагностични провали — ECRI има за цел да даде на лекарите и разработчиците на технологии по-ясна представа за рисковете в реалния свят, което в крайна сметка ще оформи по-безопасно внедряване на ИИ в цялата здравна система.


