Несподівані результати (Chroneme)

Несподівані результати цього тижня. Більшість моделей клінічного ШІ зупиняються, так і не дійшовши до другої лікарні. Модель Epic для прогнозування сепсису є хрестоматійним прикладом. Це один із найпоширеніших інструментів клінічного ШІ в США, він працює в сотнях лікарень. Його продають як спосіб попередити лікарів за кілька годин до того, як у пацієнта розвинеться сепсис.

У 2021 році команда в Мічигані незалежно перевірила цю модель і опублікувала результати в JAMA Internal Medicine. Модель виявила лише третину випадків сепсису, позначила приблизно кожну п’яту госпіталізацію і втратила від 13 до 20 пунктів точності порівняно з тим, про що звітувала Epic.

Це не виняток. Явище має назву: міжбазовий колапс. Модель засвоює, як одна установа записує свої дані, і втрачає перевагу, щойно бачить дані іншої.

Я створив Chroneme на іншому припущенні. Система, яка читає, як насправді змінюється тіло з часом, а не як лікарня це документує, має вміти переходити з лікарні в лікарню. І вона не повинна обмежуватися одним станом. Epic прогнозує сепсис. Chroneme читає траєкторії, тож той самий рушій позначає будь-яке погіршення, досить тяжке, щоб знадобилися вазопресори, інтубація або діаліз.

Я перевірив його на двох величезних, повністю незалежних базах даних відділень інтенсивної терапії. Різні лікарні, різні системи електронних медичних карток, інше десятиліття. Результати розійшлися менш ніж на пів пункту. Такий тісний збіг між базами даних рідко трапляється в клінічному ШІ, особливо для комбінованого результату, виміряного до будь-якого втручання. Колапс не є законом природи. Це властивість того, як побудована більшість моделей. Chroneme свідчить, що є інший шлях.

Розрив у пів пункту важливий через те, що він прибирає з рівняння. Більшість моделей клінічного ШІ доводиться повторно валідувати, переналаштовувати, а іноді й перенавчати в кожному новому закладі. Саме через ці витрати добрі моделі зупиняються. Якщо система зберігає точність у різних лікарнях, системах електронних медичних карток і десятиліттях, робота з упровадження змінює форму. Регулятори можуть оцінити її один раз. Системи охорони здоров’я можуть будувати на ній, не перебудовуючи її. Стелею для клінічного ШІ завжди була генералізація. Chroneme свідчить, що ця стеля зсувається.

Якщо ви працюєте в клінічному ШІ, скажіть мені, де це не витримує критики.

((Z))