Ученые из Университета Карнеги-Мелона разработали базу данных мемов для слепых с их звуковым и текстовым описанием. Благодаря этому люди с нарушениями зрения могут не только воспринимать мемы, но и создавать собственные.
В мире живет около 1,3 миллиарда людей с нарушениями зрения. Они не могут в полной степени насладиться современным интернетом, потому что на современных сайтах все чаще фигурируют картинки, а не текст, на работу с которым рассчитана большая часть программного обеспечения для слепых.
Кроме того, с каждым годом растет массив мемов, которые являются неотъемлемой частью современной онлайн-культуры. Для того, чтобы мемы стали доступными для слепых, работает исследовательская группа в Университете Карнеги-Мелона в Пенсильвании.
Современные соцсети (фейсбук, твиттер, инстаграм) позволяют пользователям добавлять описания картинок. Но мало кто использует эту функцию. Из-за этого только 0,1% визуального контента адаптирована для людей с нарушениями зрения.
Поэтому ученые создали систему Карнеги-Меллон. Это каталог, в котором мемы поданы в трех форматах: аудио, текстовое описание и шаблон мема. Система позволяет не только понимать мемы, но и создавать собственные на основе шаблона.
Алгоритмы соцсетей создают описания картинок автоматически и они могут быть недостаточно информативны. Особенно когда речь идет о мемах. Исследование ученых показало, что слепые люди намного лучше воспринимают живые описания, передающие тональность мема.
Система Карнеги-Меллон соединяет автоматический и человеческий подходы. Алгоритмы распознают объекты на картинке и создают текстовое описание, а люди надиктовывают смысл картинки в аудио.
К сожалению, сейчас каталог не может охватить весь спектр мемов. Исследователи призывают авторов мемов и администраторов сайтов делать текстовые описания мемов, позволяющие алгоритмам добавлять их в базу данных и тем самым делать интернет более инклюзивным.
Первые итоги работы группы из Университета Карнеги-Меллона были опубликованы в октябре 2019 года. Ученые продолжают работу над каталогом мемов для слепых и совершенствовать его.
Комментировать