Некоторые поисковые системы и сайты уже ввели смайлы Emoji для поиска информации или ввода каких-то данных. Однако на YouTube, например, пока нельзя ввести в поисковую строку какой-нибудь Emoji и найти видео, где демонстрируется что-нибудь похожее на смайл. Однако исследователи из Университета Амстердама и центра Qualcomm Research создали собственный сервис поиска YouTube-видео по Emoji.
Сайт Emoji2Video работает на основе нейронной сети. Принцип функционирования сервиса таков: пользователь выбирает один из представленных на Emoji2Video смайлов, а сайт подбирает 9 роликов, где несколько раз появляется нечто похожее на выбранную идеограмму. Также дается ссылка на ролик — можно убедиться, есть ли в нем что-то похожее на введенный смайл. При этом рядом с видео отображаются другие смайлы, живые аналоги которых появляются в видео. На сайте поддерживаются 385 Emoji, а поиск осуществляется пока что по 45 тысячам YouTube-роликов.
Внутри Emoji2Video работает нейронная сеть на основе технологии GoogleLeNet. Сервис делает раскадровку видео и анализирует все отрезки на наличие предметов, похожих на тот или иной смайл Emoji. Создатели экспериментального проекта считают, что поддержка Emoji может быть полезна при поиске визуального контента — картинок или видео. Напомним, ранее поиск по смайлам появился в Microsoft Bing.
дибилизм