Главный вывод исследования таков: в сфере медицинских консультаций ChatGPT оказался лучше профессиональных врачей, предоставляя более подробные и отзывчивые ответы.
Интересно ChatGPT не смог сдать экзамен для получения медицинской лицензии, но был очень близок к успеху
Результаты
В этом исследовании авторы проанализировали 195 случайных вопросов и ответов из Reddit, где пользователи обращались к врачам за медицинской консультацией по разным вопросам.
После этого исследователи задали аналогичные вопросы ChatGPT и группа медицинских специалистов оценила их. Результаты показали, что ChatGPT получил более высокие оценки за качество ответов и эмпатию к пациентам, чем врачи. Средняя оценка ответов чат-бота была лучше, чем "хорошо", тогда как ответы врачей в среднем были на 21 процент ниже, получая оценку "приемлемо".
Более того, ChatGPT оказался на 80,5% эмпатичнее к людям. Врачи чаще получали оценки "слегка сострадательных", тогда как чат-бот был либо "сострадательным", либо "очень сострадательным" к своим собеседникам. Как пример: один мужчина рассказал, что чувствует боль в руке во время чихания, и спросил, должен ли он беспокоиться об этом. Врач ответил: "В общем, нет". ChatGPT при этому дал подробный ответ из пяти абзацев, описывающих возможные причины боли и предлагающих несколько рекомендаций.
Однако исследователи подчеркнули, что необходимо дополнительное изучение рисков и преимуществ использования чатов в медицине. С развитием технологий увеличивается потенциальный вред, который может быть вызван применением искусственного интеллекта. В то же время многие врачи считают, что если ChatGPT будет помогать им с электронной перепиской, это может быть полезно, даже если он не оказывает медицинских консультаций напрямую.