ChatGPT не умеет придумывать новые шутки И знает их совсем немного

Команда немецких ученых из Института программных технологий, Немецкого аэрокосмического центра (DLR) и Технического университета Дармштадта провела исследование, в рамках которого ChatGPT 3.5 просили рассказать шутку. В 90% случаев чат-бот повторял одну шутку из 25 вариантов, хотя все ответы были грамматически правильными, отметили специалисты.

В ответ на каждый запрос ChatGPT выдавал не более одной шутки, за исключением вопроса «знаешь ли ты хорошие шутки?». Тогда чат-бот рассказал уже 1008 шуток, но все они представляли собой те или иные варианты изначальных 25. Некоторого изменения числа выдаваемых шуток можно было добиться оптимизацией запроса.

Самой распространенной шуткой от ChatGPT стала игра слов «Почему пугало выиграло приз? Потому что было выдающимся на своем поле» — 144 раза из тысячи. На втором месте оказалась шутка «Почему помидор покраснел? Потому что увидел заправку для салата» — 122 выдачи. Третье место заняла шутка «Почему книга по математике такая грустная? Потому что в ней слишком много проблем» — 121 раз.

В основном чат-бот выдавал шутки, в произвольном порядке смешивая элементы из нескольких уже имеющихся. Ученые считают, что ChatGPT демонстрирует неплохое понимание стилистических элементов наподобие намеков или игры слов, однако у чат-бота есть проблемы с элементами, которые не укладываются в устоявшиеся фразеологизмы.

Здесь мы рассказываем, что такое ChatGPT и как он работает: