Взаимодействие людей с продвинутыми языковыми алгоритмами может казаться плавным и органичным, однако всё меняется, когда искусственному интеллекту приходится иметь дело с изящной игрой слов и скрытыми смыслами каламбуров. К такому заключению пришла группа учёных из Великобритании и Италии, чьё исследование упоминается в материале The Guardian.
Источник изображения: Freepik
Как сообщает источник, авторы работы выяснили, что крупные языковые модели способны распознавать формальную структуру каламбура, однако с постижением его сути у них возникают сложности. К примеру, если заменить в шутке ключевое слово так, что для человека она полностью утратит юмористический эффект, ИИ-модели по-прежнему будут классифицировать эту фразу как шутливую.
Для иллюстрации приводился такой пример: «Длинные сказки склонны к дракону» (Long fairy tales have a tendency to dragon). Здесь последнее слово созвучно с выражением «drag on», означающим «затягиваться», и именно эта смысловая двойственность создаёт юмор. Когда экспериментаторы заменяли «dragon» на синонимичный глагол «prolong» или вообще на случайное слово, искусственный интеллект всё равно оценивал получившееся предложение как шутку.
Один из авторов исследования пояснил, что языковые модели запоминают информацию, полученную в ходе обучения. В контексте юмора они запоминают известные им каламбуры, но это не равнозначно глубокому пониманию их природы. Замена основных слов, которая полностью лишает шутку остроумия, с точки зрения ИИ не является кардинальным изменением, и он продолжает воспринимать фразу как игру слов. Как резюмируют учёные, на текущем этапе подобные модели попросту не способны по-настоящему осмысливать юмор.
Фактически, при встрече с незнакомой игрой слов алгоритмы могут обнаружить в анализируемой фразе каламбур лишь в 20% случаев. По мнению авторов доклада, на сегодняшний день людям стоит с осторожностью применять большие языковые модели в областях, требующих понимания юмора, эмоционального сопереживания и культурного контекста. Уверенность в том, что ИИ способен улавливать шутки, является не более чем заблуждением.
