Как отличить, настоящий ли GPT-4 в боте Telegram, или вам подсунули GPT-3.5?

Не так давно мы с командой запустили ChatGPT-4 бота в Телеграм. И, сами того не ожидая, столкнулись с большим количеством комментариев от пользователей, что GPT-4 не настоящий. Основным аргументом от пользователей был скриншот с вопросом: "Какую версию GPT ты используешь?" Ответ их разочаровывал...

Дело в том, что данные на которых обучался GPT ограничены 2021 годом. И если нейросеть спросить хоть что-то о GPT-4, то она с уверенностью ответит, что эта языковая модель еще не вышла.

По крайней мере такие ответы мы получаем через API OpenAI. И если какой-либо сервис, или GPT бот в телеграм ответит по-другому, то это означает лишь одно - его обучили так отвечать.

В телеграме появилось несчетное количество ботов, которые паразитируют на имени OpenAI и не стесняются называть себя официальными ботами и, что они работают на GPT-4.

Однако официальных ботов OpenAI в телеграме быть не может. Все они работают через API, и зачастую именно на GPT-3.5. Хотя могут ввести пользователя в заблуждение, отвечая так, как нужно админам этого бота.

Вот пример "официального" бота Google Bard

Только настоящий Bard еще не знает русского языка, а доступ к API получить могут избранные тестовые пользователи. Отсюда вывод - вас обманывают.

Так как же можно определить, какую версию GPT на самом деле использует бот? Вот табличка, которая поможет вам проверить, настоящий ли GPT-4

Если мы хотим проверить, насколько умна модель, давайте дадим ей решить задачку. Ведь GPT-4, как более умная модель, должна справиться с более сложными и неочевидными задачами, верно?

Например, попросим ее решить следующую загадку, давно плавующую на просторах интернета:

"I have a nice riddle for you…. Can you find the the mistake?

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73"

Казалось бы, ничего сложного, простая проверка на внимательность. Однако, версия ChatGPT-3.5 уже не справляется с решением этой загадки, в то время, как следующая 4 версия щелкает ее на раз-два.

Да, мы написали эту статью, чтобы, прорекламировать своего GPT-4 бота, он честно отвечает, что GPT-4 еще не вышла (ограничение знаний 2021 годом), в нем не зашиты никакие дополнительные промпты и он не обучен вводить вас в заблуждение. Просто попробуйте, и сравните разницу между двумя моделями.