Исследователи в Китае создали саркастичный искусственный интеллект, который достиг самых современных результатов на основе набора данных, полученного из Twitter.
ИИ использует мультимодальное обучение, которое сочетает в себе текст и образы, так как они необходимы для понимания того, насколько саркастичен человек. Исследователи утверждают, что обнаружение сарказма может помочь в анализе настроений людей и краудсорсинговом понимании общественного отношения к конкретному предмету. В рамках начатого ранее в этом году испытания, Facebook использует мультимодальный ИИ чтобы выяснить, нарушают ли мемы условия предоставления их услуг.
Искусственный интеллект исследователей фокусируется на различиях между текстом и изображениями, а затем объединяет эти результаты, чтобы сделать прогнозы. Он также сравнивает хэштеги с текстом твита, чтобы помочь оценить настроение, которое пользователь пытается передать.
“В частности, входные лексемы будут уделять повышенное внимание областям изображения, противоречащим им, поскольку несоответствие является ключевым признаком сарказма. Оно может появиться только в тексте (например, саркастический текст, связанный с несвязанным изображением), необходимо рассмотреть несоответствие внутри модальности.” – говорится в статье.
На основе набора данных, полученного из Twitter, модель достигла улучшения на 2,74% по шкале обнаружения сарказма F1 по сравнению с HFM, мультимодальной моделью обнаружения, введенной в прошлом году. Новая модель также достигла показателя точности 86%, по сравнению с 83% для HFM.
Статья была опубликована совместно Китайской академией наук и Институтом информационной инженерии в Пекине, Китай. Доклад был представлен на этой неделе на виртуальной конференции Методов Распознавания Естественных Языков.
Искусственный интеллект – это последний пример обнаружения мультимодального сарказма, появившийся с тех пор, как исследователи ИИ начали изучать сарказм в мультимодальном контенте Instagram, Tumblr и Twitter в 2016 году.
