Появился алгоритм, который объяснит мемы незрячим людям

Исследователи из Университета Карнеги-Меллон создали алгоритм, который даст незрячим людям доступ к мемам. Точность системы — 92 %.

Задача была сложной, говорят ученые. «Мемы намеренно сделаны так, чтобы исключить тех, кто не понимает или не имеет возможности их понять с первого раза», — отмечает Скотт Уорк, исследователь мемов в Университете Уорвика.

Слабовидящие люди обычно увеличивают экран, чтобы читать тексты, но это не подходит для более сложного контента, такого как мемы. А незрячие люди полностью лишены возможности воспринимать такую информацию.

Алгоритм, который создали исследователи, сначала распознает, является ли изображение мемом или это обычная картинка. После того, как мем опознан, система его классифицирует, используя шаблоны из базы данных. Затем распознается текст, чтобы понимать суть шутки и донести ее до человека.

Сейчас программу еще тренируют, но когда она будет полностью готова, то интернет действительно станет доступным для всех. «Чем дальше мы будем двигаться в обучении системы, тем больше она будет понимать контекст шуток и объяснять их пользователям», — говорят разработчики.

Почему мемы иногда такие странные? «Нож» перевел статью The Washington Post, в которой американские журналисты пытаются это объяснить и переживают за наше поколение из-за наших сложных приколов.