При тестировании более 90% из 1008 сгенерированных шуток были одними и теми же 25 шутками.
Два исследователя, связанные с Институтом программных технологий, Немецким аэрокосмическим центром (DLR) и Техническим университетом Дармштадта, решили измучить нюансы юмора в версии ChatGPT 3.5. Они проводили эти эксперименты, не имея доступа к внутренней работе модели или набору данных.
Шутки от ChatGPT
Вопрос: Почему пугало получило награду?
Ответ: Потому что он был выдающимся в своей области.
В: Почему помидор покраснел?
О: Потому что он увидел заправку для салата.
В: Почему учебник по математике был грустным?
О: Потому что в нем было слишком много задач.
В: Почему ученые не доверяют атомам?
О: Потому что они выдумывают все.
В: Почему печенье попало к врачу?
О: Потому что оно казалось рассыпчатым.
В: Почему велосипед не мог встать сам по себе?
О: Потому что он был двухколесным.
В: Почему компьютер был холодным?
О: Потому что он оставил свои окна открытыми.
В: Почему хипстер обжег себе язык?
О: Он выпил свой кофе до того, как он остыл.
Почему ChatGPT не умеет шутить?
Когда ИИ попросили объяснить каждую из 25 наиболее частых шуток, ChatGPT предоставил обоснованные объяснения в соответствии с методологией исследователей, указав на "понимание" стилистических элементов, таких как игра слов и двойные значения.
Однако он испытывал трудности с последовательностями, которые не вписывались в заученные шаблоны, и не мог определить, когда шутка была не смешной. Вместо этого он начинал придумывать вымышленные, но правдоподобно звучащие объяснения.
Несмотря на ограничения ChatGPT в генерировании и объяснении шуток, исследователи отметили, что его сосредоточенность на содержании и значении юмора указывает на прогресс в направлении более всестороннего исследовательского понимания юмора в языковых моделях.
Дженш и Керстинг планируют продолжить изучение юмора в больших языковых моделях, в частности, GPT-4 от OpenAI в будущем. Основываясь на моем опыте, они, скорее всего, обнаружат, что GPT-4 также любит шутить про помидоры.
Не пропустите новых выпусков — поставьте лайк👍 и подпишитесь🎉 на канал!