ChatGPT сдал экзамен по неврологии

✍🏻 ChatGPT заставили ответить на 2036 вопросов, одобренных Американским советом психиатрии и неврологии. Производительность ИИ оценивали по общим полученным баллам, уровню достоверности ответов и темам, на которые были даны верные ответы.

🙈 Согласно результатам, ChatGPT-4 дал правильные ответы на 85% вопросов, достигнув проходного балла на экзамене по неврологии. Для сравнения: средний показатель правильных ответов людей на эти вопросы составил 73,8%, а ChatGPT-3,5 не ошибся только в 66,8% вопросов.

👩‍🎓 А еще ChatGPT-4 оказался сообразительнее людей в вопросах, связанных с поведенческой, когнитивной и психологической сферами. Обе модели использовали уверенную речь, даже когда давали неправильные ответы.

👀 Это уже не первый медицинский экзамен, которому люди подвергают ChatGPT: так, версия 3,5 показала неплохие результаты на экзамене на получение медицинской лицензии в США, но не сдала экзамен по офтальмологии.

🧐 Исследователи пришли к выводу, что ChatGPT может оказаться полезным в клинической неврологии и здравоохранении в целом, но при условии дальнейших его усовершенствований.