Кто лучше объяснит сложный термин — нейросеть или человек? А если придётся объяснять семилетке?
Эксперимент, в котором люди пытаются победить машину своей логикой.
Сегодня нейросеть умеет и писать дипломные работы по нейродинамике, и объяснять сложные термины простыми словами. Мы решили проверить, кто справится с последним лучше — человек или нейросеть. Составили список терминов из разных сфер и попросили нейросеть YandexGPT их объяснить. А затем сравнили с ответами людей — сотрудников «Яндекса» и «Комитета».
Термин №1: рассказываем бабушке про проджект-менеджмент
Можно сравнить проджект-менеджмент с готовкой. Менеджером здесь будет тот, кто отвечает за результат: выбирает рецепт, покупает ингредиенты на рынке (отлично, если договорится о скидке), готовит блюдо. Всё это — чтобы ужин прошёл вовремя и гости были довольны. Так работает и проджект-менеджер: распределяет ресурсы, отвечает за бюджеты, сроки и производство.
Понравилось, что и нейросеть, и человек попытались объяснить проджект-менеджмент через приготовление еды, — это понятный для бабушки пример. Но в обоих объяснениях не хватает одного важного элемента — упоминания качества результата, а не только сроков и бюджетов проекта. В целом, YandexGPT и человек в этом кейсе на одном уровне. Отдам своё предпочтение Алисе за более развёрнутый ответ и несколько приведённых примеров.
Нейросеть 1:0 Человек
Термин №2: объясняем подростку 12 лет, что такое нейросеть
Представь, что это программа. Она сконструирована таким образом, что может выдавать результат, который в неё не закладывали разработчики. Делает она это на основе информации, которую каким-то образом переработала.
На мой взгляд, ни один из ответов не будет до конца понятен ребёнку. Но и сам термин довольно сложный — объяснить его даже взрослому будет непростой задачей. От Алисы я ждал примерно такой ответ: «Это я. Перед тобой нейронная сеть. Ты можешь задать мне вопрос, а я отвечу».
Тем не менее сильные стороны в объяснениях тоже есть. Так, Алиса привела в пример несколько прикладных областей, где могут быть использованы нейросети. А человек уточнил, что нейросеть всё-таки использует данные, которые в неё не закладывал разработчик. Голосую за ответ YandexGPT: из него ребёнок поймёт, почему нейросеть полезна.
Нейросеть 2:0 Человек
Термин №3: «хайпово» рассказываем про конформизм человеку, которому 20 лет
Представь, что тебе не нравится музыка Моргенштерна*. Но нравится девушка, которая слушает этого рэпера. Чтобы ей понравиться, ты скрываешь своё настоящее отношение к исполнителю и ведёшь себя как его поклонник.
У нейросети YandexGPT получилось классическое определение конформизма в социологии. Но Алиса сосредоточилась только на негативных аспектах конформизма, что не совсем точно. Например, он также помогает людям лучше понимать друг друга.
Человек в объяснении говорит о конформизме как о компромиссе между личными предпочтениями и социальным давлением. Это определение более жизненное.
Идеальное объяснение, на мой взгляд, находится посередине. Но раз была задача объяснить суть конформизма доступно — отдам голос человеку.
Нейросеть 2:1 Человек
Термин №4: рассказываем 45-летнему про урбанизацию
Урбанизация — это когда людей, которые живут в городах, становится больше, чем в сельской местности. Почему для этого процесса придумали отдельный термин? Всё дело в деньгах. Есть экономический эффект от того, где ты живёшь. Например, у тебя небольшое хозяйство в сельской местности — выращиваешь курочек и овощи. Чтобы купить удобрение, нужно съездить в специальный магазин в большом населённом пункте. Или курица заболела — едешь в город к ветеринару и покупаешь лекарство. Дальше задача — как можно быстрее продать то, что ты так долго выращивал. А чем больше людей, тем проще найти покупателя. Получается, что ты очень часто мотаешься в город. А если переедешь, то сэкономишь своё время и больше заработаешь.
Нейросеть рассказала про урбанизацию очень коротко и взяла за основу экономическую логику: в городах больше возможностей для работы и, следовательно, больше людей туда переезжают. Такой подход мне показался поверхностным — это базовое и слишком упрощённое определение.
В объяснении человека больше аргументов. Автор не только говорит о деньгах, но и описывает влияние урбанизации на общество: меняется образ жизни сельчан и горожан, товары и услуги становятся более доступными, открываются специализированные магазины. Это определение, на мой взгляд, более полно соответствует социологическому анализу. Оно комплексное и информативное. Так что побеждает ответ человека.
Нейросеть 2:2 Человек
Термин №5: объясняем глобальное потепление бабушке
Речь про процесс постепенного разогрева атмосферы Земли. Его можно сравнить с парником, который дольше сохраняет тепло для растений. Он впускает свет, но не выпускает его. Это и есть мини-модель атмосферы Земли — мы строим настолько эффективный парник, что становится теплее, чем нужно.
Нейросеть в попытке упростить усложнила определение. Получилось нагромождение аналогий и метафор, которое не даёт в полной мере понять суть явления. Самая простая аналогия для бабушек — парник, поэтому в этом случае человек понятнее и точнее объяснил суть явления. Из-за работы предприятий, промышленных производств, сжигания топлива в атмосфере увеличивается количество углекислого газа, создаётся парниковый эффект. Он работает по принципу парников у бабушки на даче — но очень «перерабатывает».
Нейросеть 2:3 Человек
Термин №6: рассказываем семилетнему ребёнку о ГМО
Представь, что мы идём в магазин, выбираем 5 конструкторов и собираем: от одного возьмём дверку, от второго — окошечки, от третьего — крышу. В итоге получим свой красивый домик. Так и в живых существах есть разные интересные свойства — мы можем собрать из них что-то новое. Зачем это нужно? Например, в магазине есть много сортов помидоров. Какой-то дольше остаётся красным и сочным, какой-то больше, какой-то блестит. Объединив эти качества, мы можем собрать свой суперпомидорчик. Он будет блестящий и вкусный, а ещё долго не испортится.
Оба ответа понятные и образные. Но в этом случае более подходящим мне кажется ответ нейросети. Как правило, в 7 лет ребёнок уже знает, что такое гены, поэтому важно ему сказать о том, что мы не просто собираем «суперпомидор», а целенаправленно вносим изменения в ДНК. Ответ человека тоже корректный и понятный, но я бы, наверное, ответила так трёхлетнему, а не семилетнему ребёнку.
Нейросеть 3:3 Человек
Здесь мы попросили Алису помочь с определениями сложных терминов для детей или пожилых родственников. Но она умеет гораздо больше. YandexGPT может написать письмо клиенту с предложением назначить встречу, структурировать тезисы для выступления на конференции, идеи для новогоднего праздника или план сочинения.
*Минюст внёс Моргенштерна в список физических лиц, выполняющих функции иностранного агента