Американские ученые планировали разработать систему, которая сможет распознавать расистские посты в Twitter. Таким образом, администрация социальной сети могла бы удалять агрессивные, оскорбительные твиты и комментарии.

Созданием алгоритма занимались специалисты Массачусетсткого технологического института, которые выяснили, что для понимания текстов искусственным интеллектом, он должен распознавать сарказм. Тогда ученые использовали технологию глубокого обучения, при помощи которой нейросеть выделяет из огромного массива метаданных крошечные паттеры, например, смайлы-эмодзи.

Исследователям пришлось собрать более 55 миллиардов твитов, из которых затем были выбраны 1,2 миллиарда сообщений, содержащих комбинации текста с 64 самыми популярными смайлами-эмодзи.

В результате, был разработан алгоритм, дающий возможность нейросети находить связь в тексте между смайлами и языковым стилем. Алгоритм получил название DeepMoji и может распознать эмоциональный подтекст порою лучше, чем многие пользователи Twitter.

Оценить работу нового алгоритма может каждый желающий. Для этого на специальном сайте http://deepmoji.mit.edu/ нужно ввести нужное предложение, а программа автоматически подберет к нему подходящие смайлы-эмодзи.