Насколько креативен ChatGPT?

Дивергентным мышлением психологи называют способность человека придумывать уникальные решения проблем, которые не имеют очевидного единственного решения. Это одна из характеристик творчества. Сейчас модно изучать способность к нему больших языковых моделей ИИ, в частности всем известного ChatGPT-4. Недавно появилось новое исследование психологов, посвященное его «творческим» возможностям. Опыты и тесты с участием 151 добровольца провела группа психологов под началом сотрудника Университета Арканзаса Кента Ф. Хуберта (Kent F. Hubert).

Авторы предложили GPT-4 и людям три теста. Первый посвящен альтернативному использованию объектов. В нем, например, надо было придумать новое применение таким повседневным предметам, как веревка или вилка. Во втором задании участникам предлагали представить возможные исходы гипотетических ситуаций. К примеру, ответить на нечеткий вопрос: «Что было бы, если бы людям больше не нужно было спать?» Третьим был тест на дивергентные ассоциации, в котором надо было придумать 10 существительных, максимально далеких друг от друга по значению. Для пояснения авторы в статье об исследовании сообщают, что между собакой и кошкой нет такой разницы, как между кошкой и онтологией.

Ученые обнаружили, что в каждом из заданий на дивергентное мышление GPT-4 был более оригинальным и давал более обоснованные и быстрые ответы, чем люди. Психологи очарованы высокими показателями его креативности. Они делают вывод, что ИИ продемонстрировал более высокий творческий потенциал во всех задачах на дивергентное мышление.

Вывод сопроводили оговорками о том, что экспериментаторы не оценивали уместность ответов GPT-4. Ученые отмечают, что хотя все критерии исследования являются показателями творческого потенциала, но этого недостаточно. Есть еще один аспект оценки креативности человека — вовлеченность в творческую деятельность. Авторы исследования замечают, что ИИ, в отличие от человека, не обладает самостоятельностью и зависит от его помощи. Да и мотивация добровольцев давать хорошо продуманные ответы могла быть невысокой.

Результаты тестов заставили психологов задуматься, адекватно ли эксперименты оценивают творческое мышление. Но они все же делают вывод, что результаты ставят под сомнение преставление о том, что творчество является исключительно человеческой чертой, и уверены, что уже сейчас языковые модели ИИ демонстрируют более высокий творческий потенциал, чем люди.

Исследование выглядит как намерение измерить гениальность математика способностью выполнять в уме умножение чисел быстрее арифмометра. Как говорится, каков вопрос, таков ответ. Круг значений любого понятия, в том числе творчества, достаточно размыт. Тем не менее языковые модели быстро прогрессируют и уже превосходят человека в тех областях, где раньше это было немыслимо. И польза ИИ для помощи в творчестве бесспорна. Научную статью можно загрузить с сайта издания Scientific Reports.