Паша и его прокрастинация

@abbsol

27 дек. 2023

Тест на человечность: какие результаты показал искусственный интеллект

Спойлер: разумеется, ИИ провалил тест.

🤓 Исследователи из Калифорнийского университета в Сан-Диего проверили способность ИИ выдавать себя за человека. Для этого они использовали тест Тьюринга, который в 1952 г. предложил математик Алан Тьюринг.

👩‍💻 Во время теста человек общается с другими участниками эксперимента посредством компьютера, а после определяет, кто из его собеседников был человеком, а кто — машиной. Тест считается пройденным, если не менее чем 50% участников эксперимента считают паттерн общения невидимого собеседника похожим на человеческий.

🤖 В исследовании участвовали 652 человека и такие модели ИИ, как ChatGPT-3.5, ChatGPT-4 и ELIZA — виртуальный собеседник, разработанный аж в 1966 г. Согласно результатам, ChatGPT-4 приняли за человека в 41% случаев, ELIZA — в 27%, а ChatGPT-3.5 — только в 14% случаев.

Некоторые из учёных считают, что ChatGPT не прошёл тест по той причине, что среди его настроек есть такие, как не выражать своего мнения и отвечать собеседнику в формальном тоне 🤷‍♀️