AI „се провали“ на изпита по радиология: хората все още са по-добри в анализирането на изображения

Изследователите сравняват ефективността на невронните мрежи и професионалните лекари при разпознаването

аномалии на рентгенови лъчи. Резултатите показаха, че хората се справят по-добре досега, но AI може да открие заболявания, които радиолозите пропускат.

Проучването показа, че AI при преминаванетипичният изпит постигна средна обща точност от 79,5% и премина два от десет практически изпита, а средностатистическият рентгенолог постигна средна обща точност от 84,8% и премина четири от десет практически изпита. 

В същото време, при анализ на 148 от 300 рентгенографии,които бяха правилно интерпретирани от повече от 90% от рентгенолозите, невронната мрежа правилно идентифицира нарушенията в 134 случая (91%) и е грешна в останалите 14 случая. В същото време, изучавайки 20 рентгенови снимки, които повече от половината лекари интерпретират неправилно, AI в половината от случаите открива нарушение, пропуснато от лекарите.

Учените са разработили десет „изпитания“бързи прегледи, базирани на един от трите модула, съставляващи квалификационния изпит за членство в Кралския колеж на радиолозите. Това е един от задължителните изпити, които всички британски лекари полагат, за да се квалифицират като рентгенолог консултант. 

Всеки практически тест се състоеше от 30 радиографии,отговарящи на изискванията за истински тест на Кралския колеж по радиолози или по-сложен. За да издържат изпита, кандидатите трябваше да интерпретират правилно най-малко 27 (90%) от 30 изображения в рамките на 35 минути. 


Примери за изображения от теста.Вляво: Нормална абдоминална рентгенова снимка, на която AI открива дясностранен базален пневмоторакс (фалшиво положителен). Вдясно: рентгенова снимка на стъпалото в две проекции, която показва остеохондрален дефект в купола на талуса (пунктирана линия), това нарушение е пропуснато от всички лекари и AI. Изображения: Susan Cheng Shelmerdine et al., BMJ

Учените дадоха готовия тест на 26 рентгенолози,който издържа изпита миналата година, и една от комерсиалните AI системи, популярни на пазара, обучени да оценяват рентгенови лъчи на гръдния кош и костите (мускулно-скелетни) за няколко състояния, включително фрактури, подути и изкълчени стави и колапс на белите дробове.

Изследователите отбелязват, че според проучвания радиолозите надценяват ефективността на ИИ, но засега на него трябва да се гледа като на помощник, а не като алтернатива на лекаря.

Прочетете още:

Ударна вълна от Слънцето е отворила пукнатина в магнитното поле на Земята

17-годишен инженер излезе с безмагнитен двигател: той може да се използва в електрически превозни средства

Първият по рода си материал издържа на „снаряди“, които се движат със скоростта на звука