Такий собі лікар. ChatGPT вгадує діагнози пацієнтів менш як в половині випадків — дослідження

IT-індустрія

1 серпня 2024, 18:25

Вчені протестували ChatGPT на здатність правильно ставити діагнози пацієнтам, і результати цієї перевірки не вражають.

ChatGPT вже може бути корисним для того, щоб порадити вам схему тренування, але, перш ніж він замінить лікаря, йому доведеться пройти довгий шлях. Нещодавній експеримент показав, що популярний чат-бот зі штучним інтелектом частіше робить неправильні медичні висновки, аніж правильні.

Щоб визначити, наскільки добре працює ChatGPT 3.5 у складних медичних випадках, дослідники надали програмі для аналізу 150 ситуацій. Зазвичай вони використовуються для перевірки діагностичних можливостей медичних працівників. Інформація, надана ChatGPT, включала історію пацієнта, результати фізичного обстеження та деякі результати лабораторних досліджень або зображення. ChatGPT попросили поставити діагноз або скласти відповідний до нього план лікування. Дослідники оцінювали, чи дав чат-бот правильну відповідь і наскільки добре він обґрунтовував діагноз чи призначене лікування, а також релевантність цитованої медичної інформації.

Хоча ChatGPT навчався на сотнях терабайтів даних з усього Інтернету, він давав правильну відповідь лише в 49% випадків. Він отримав трохи кращі результати щодо релевантності своїх пояснень, пропонуючи повні та доречні пояснення у 52% випадків.

«ChatGPT у його нинішньому вигляді не є точним як діагностичний інструмент. ChatGPT не обов’язково надає правдивість фактів, попри величезну кількість інформації, на основі якої його навчали. Точність і чутливість мають вирішальне значення для діагностичного інструменту, оскільки пропущені діагнози можуть призвести до значних наслідків для пацієнтів, таких як відсутність необхідного лікування або подальшого діагностичного тестування, що призведе до гірших результатів для здоров’я», — пишуть дослідники у статті, опублікованій в журналі PLOS ONE.

Хоча на ChatGPT не варто розраховувати в діагностиці пацієнтів, дослідники кажуть, що він все ще може бути корисним для лікарів-початківців.

«У поєднанні з традиційними методами навчання ChatGPT може допомогти студентам подолати прогалини в знаннях і спростити складні концепції, надаючи миттєві та індивідуальні відповіді на клінічні запитання», — написали вони.

Нагадаємо, у лютому 2023 року ChatGPT зміг скласти іспит на медичну ліцензію в США.

Правова інформація. Ця стаття містить загальні відомості довідкового характеру і не повинна розглядатися як альтернатива рекомендаціям лікаря. NV не несе відповідальності за будь-який діагноз, поставлений читачем на основі матеріалів сайту. NV також не несе відповідальності за зміст інших інтернет-ресурсів, посилання на які присутні в цій статті. Якщо вас турбує стан вашого здоров’я, зверніться до лікаря.

Інші новини

Всі новини