ChatGPT odpowiada na pytania medyczne lepiej niż konsultanci z lekarzami

Группа исследователей под руководством Калифорнийского университета в Сан-Диего изучила возможность

использования чат-бота ChatGPT для онлайн-консультирования пользователей по медицинским вопросам. Ответы ИИ в большинстве случаев оказались более полными и качественными, чем у медработников, и демонстрировали большую чуткость по отношению к пациентам.

Для своего анализа ученые использовали медицинские вопросы, опубликованные на сайте Reddit. Один из сервисов этой сети (AskDocs) позволяет пользователям задавать медицинские вопросы, на которые отвечают профессиональные врачи с подтвержденной сервисом квалификацией. Исследователи случайным образом отобрали 195 сообщений из AskDocs, в которых медицинский работник ответил на вопрос. 

Te same pytania zadano chatbotowi ChatGPT bezwszelkie wyjaśnienia. Naukowcy zebrali odpowiedzi od lekarzy i teksty napisane przez sieć neuronową. Wszystkie pytania i zalecenia w zdepersonalizowanej formie zostały pokazane grupie ekspertów - licencjonowanych lekarzy. Nie wiedzieli, które z odpowiedzi zostały napisane przez lekarzy, a które przez sztuczną inteligencję.

Эксперты сравнивали ответы и рекомендации на основе качества информации и уровня эмпатии — чуткости и сочувствия по отношению к пациенту, а также должны были ответить, какой из ответов кажется им наилучшим. В результате медики предпочли ответы ChatGPT ответам врачей в 79% случаев. 

Odpowiedzi ChatGPT zostały ocenione znacznie wyżej wjakość i wrażliwość. Odsetek odpowiedzi dobrej lub bardzo dobrej jakości był 3,6 razy wyższy dla sieci neuronowej niż dla lekarzy. I ku zaskoczeniu naukowców chatbot wykazał się dużą empatią: eksperci ocenili 45,1% odpowiedzi AI jako empatyczne lub bardzo empatyczne, a tylko 4,6% odpowiedzi medycznych.

Ocena ekspertów dotycząca jakości odpowiedzi (po lewej) i poziomu empatii (po prawej) ChatGPT i profesjonalnych lekarzy. Zdjęcie: Uniwersytet Kalifornijski w San Diego

Naukowcy podkreślają, że badanie dotyczywyłącznie konsultacje online z pomocą specjalistycznych usług i nie zastępują pełnego badania w klinice. Nie uważają, że sieć neuronowa powinna zastąpić lub wyprzeć lekarzy, ale może stać się dodatkowym narzędziem odciążenia placówek medycznych i zapewnienia dostępu do wysokiej jakości opieki osobom, które są jej pozbawione.

Czytaj więcej:

Naukowcy po raz pierwszy zobaczyli, jak gwiazda pożera planetę: to w końcu czeka na Ziemię

Dwie superziemie znalezione na skraju strefy nadającej się do zamieszkania: jedna z nich ma komfortową temperaturę

Naukowcy zbadali umierający mózg i opowiedzieli, co znaleźli