Штучний інтелект від Microsoft показав кращі результати, ніж лікарі, у виявленні складних захворювань, згідно з новими даними дослідження.

Діагностична система Microsoft MAI-DxO правильно встановила діагноз у 83% складних медичних випадків. Лікарі загального профілю з доступом до підручників та інтернету досягли точності 36%, а без довідкових матеріалів - 22%, йдеться в блозі Microsoft.

MAI-DxO не одразу видає готову відповідь, а імітує роботу консиліуму. Кілька ШІ-агентів пропонують можливі діагнози, вибирають запитання й аналізи, перевіряють припущення один одного та оновлюють висновок після отримання нових даних. Microsoft пояснює, що система також зважує очікувану користь обстеження та його вартість.

Результати були оприлюднені в рецензованому виданні Science. Тест SDBench складався з 304 складних кейсів, взятих з The New England Journal of Medicine, де як система, так і медики спочатку отримували лише стисле резюме, а потім самостійно запитували додаткові дані. У звичайніших ситуаціях з відділення невідкладної допомоги MAI-DxO продемонструвала результат 80%, в той час як лікарі мали показник 47%.

Згідно з підрахунками авторів, система виявилася економнішою у витратах на діагностику. Одна з її конфігурацій досягла точності на рівні 81%, при цьому її розрахункова вартість була менш ніж у два рази нижча за витрати інших протестованих методів. Варто зазначити, що ці цифри не відображають реальні витрати лікарні, оскільки дослідники оцінювали ціни на замовлені аналізи та процедури за стандартами США.

Однак, дослідження не підтверджує, що MAI-DxO перевершує лікарів у реальних клінічних умовах. Тестування проводилося на основі історичних текстових випадків, без залучення живих пацієнтів, фізичних оглядів, зображень або патологічних зразків. Порівняння здійснювалося лише з окремими лікарями загального профілю, а не з командами фахівців. Крім того, система ще не отримала регуляторного схвалення і не призначена для використання в клінічній практиці.

Наступним етапом стане проведення проспективного дослідження спільно з Beth Israel Deaconess Medical Center у Бостоні. Пацієнти будуть безпосередньо залучені до взаємодії з системою, а результати роботи порівняють із незалежними оцінками медичних фахівців. Інформації про дату початку випробувань і можливі терміни виходу MAI-DxO від Microsoft наразі немає.

Компанія презентувала відкритий код SDBench, що включає модулі для отримання інформації про випадки, оцінювання діагнозів та розрахунку вартості. Дослідники отримають можливість відтворити процес оцінювання або протестувати альтернативні моделі, проте доступ до клінічних наборів даних вимагатиме окремого дозволу або ліцензії.

У травні було проведено ще одне дослідження, яке виявило, що модель OpenAI o1 успішно або практично правильно ставила діагноз у 67% випадків тріажу, в той час як два лікарі показали результати 55% і 50%. Автори цього дослідження підкреслили, що результати тестування не свідчать про готовність штучного інтелекту до самостійного прийняття медичних рішень.