Как только участники эксперимента узнавали, кто автор текста, их оценки менялись кардинально.Автор новостей
Группа ученых решила проверить, действительно ли ИИ уступает человеку в творчестве, или дело в предвзятости самих читателей, сообщает Fast Company. Для этого исследователи собрали шесть коротких рассказов: три написал человек, а три сгенерировал ChatGPT по схожим сюжетам и темам.
В эксперименте участвовали 1682 человека, каждому дали прочитать один рассказ. При этом организаторы не всегда говорили правду об авторстве. Кому-то честно сообщали, что перед ним рассказ от нейросети, кому-то — что текст написал живой автор, хотя на самом деле его создал алгоритм.
Результат получился неожиданным: когда участники не подозревали об обмане, тексты от ИИ набирали более высокие баллы по вовлеченности и качеству, чем работы людей. Разница проявлялась стабильно, вне зависимости от темы рассказа.
Но стоило испытуемым узнать правду об авторстве — картина менялась. Работы нейросети, которые выдавали за человеческие, получали еще более высокие оценки. А вот когда людям честно говорили, что перед ними текст от алгоритма, баллы падали. Получается, срабатывает не оценка самого текста, а установка в голове читателя: раз это ИИ, значит, хуже.
Одна из авторов исследования объяснила такой парадокс просто. По ее словам, представления людей о возможностях ИИ сильно устарели. Многие все еще уверены, что творчество требует эмоций и личного опыта, поэтому недооценивают способности нейросетей в этой сфере. Что касается причины, почему тексты от алгоритма читаются легче — здесь дело в стиле изложения. Нейросеть строит фразы прямо и без сложных конструкций. Человеческие рассказы чаще содержат недосказанность, отсылки и многослойные образы, а это требует от читателя дополнительных умственных усилий.
Ранее другое исследование зафиксировало похожий эффект в текстах, где авторы использовали помощь языковых моделей при написании. Такие материалы читатели называли более однородными по тону и менее яркими по сравнению с полностью авторскими работами. Правда, сами авторы результатом оставались довольны — независимо от того, применяли они нейросеть или писали полностью сами.
С одной стороны, у людей есть стойкое предубеждение против творчества нейросетей. С другой — когда снимается ярлык, простой и понятный текст побеждает сложный и витиеватый. Вопрос лишь в том, что мы на самом деле ценим в литературе: глубину смыслов или легкость восприятия.
Также недавно писали, что бумеры воспитывают внуков на «ИИ-слопе». Подробности в статье.