AI "zakte" voor het examen radiologie: mensen zijn nog steeds beter in het analyseren van beelden

Onderzoekers vergeleken de prestaties van neurale netwerken en professionele artsen bij het herkennen

afwijkingen op röntgenfoto’s. De resultaten toonden aan dat mensen het tot nu toe beter doen, maar AI kan ziekten vinden die radiologen over het hoofd zien.

Uit het onderzoek bleek dat AI bij het passerenhet typische examen behaalde een gemiddelde algehele nauwkeurigheid van 79,5% en slaagde voor twee van de tien oefenexamens, en de gemiddelde radioloog behaalde een gemiddelde algehele nauwkeurigheid van 84,8% en slaagde voor vier van de tien oefenexamens.

Tegelijkertijd, bij het analyseren van 148 van de 300 röntgenfoto's,die correct werden geïnterpreteerd door meer dan 90% van de radiologen, identificeerde het neurale netwerk overtredingen correct in 134 gevallen (91%) en had het ongelijk in de overige 14 gevallen. Tegelijkertijd ontdekte AI bij het bestuderen van 20 röntgenfoto's, die door meer dan de helft van de artsen verkeerd werden geïnterpreteerd, in de helft van de gevallen een door de artsen gemiste overtreding.

Wetenschappers hebben tien ‘trial’ ontwikkeldsnelle examens op basis van een van de drie modules die deel uitmaken van het kwalificerende examen voor lidmaatschap van het Royal College of Radioologists. Dit is een van de verplichte examens die alle Britse artsen afleggen om in aanmerking te komen als 'Consultant Radioloog'.

Elke oefentest bestond uit 30 röntgenfoto's,voldoen aan de eisen van een echte Royal College of Radioologists-test of complexer. Om voor het examen te slagen, moesten de kandidaten binnen 35 minuten ten minste 27 (90%) van de 30 afbeeldingen correct interpreteren.


Voorbeelden van afbeeldingen uit de test.Links: Normale buikröntgenfoto waarop AI een rechtszijdige basale pneumothorax aantrof (vals positief). Rechts: Röntgenfoto van de voet in twee projecties, waarop een osteochondraal defect in de koepel van de talus te zien is (stippellijn), deze overtreding werd door alle artsen en KI gemist. Afbeeldingen: Susan Cheng Shelmerdine et al., BMJ

Wetenschappers gaven de voltooide test aan 26 radiologen,die vorig jaar slaagde voor het examen, en een van de commerciële AI-systemen die populair zijn op de markt, getraind om röntgenfoto's van borst en botten (musculoskeletaal) te evalueren voor verschillende aandoeningen, waaronder breuken, gezwollen en ontwrichte gewrichten en ingeklapte longen.

Onderzoekers merken op dat radiologen volgens enquêtes de effectiviteit van AI overschatten, maar voorlopig moet het worden gezien als een assistent, niet als een alternatief voor een arts.

Lees verder:

Een schokgolf van de zon heeft een scheur in het magnetisch veld van de aarde geopend

De 17-jarige ingenieur bedacht een magneetloze motor: hij kan worden gebruikt in elektrische voertuigen

Het eerste materiaal in zijn soort is bestand tegen 'projectielen' die zich verplaatsen met de snelheid van het geluid