По данным Microsoft, более чем на половине изображений в Интернете отсутствует альтернативный текст. Надписи с изображениями (альтернативный текст) являются ключевыми для многих слепых или слабовидящих, поскольку они предоставляют программы чтения с экрана текст для чтения вслух. В настоящее время Microsoft пытается восполнить этот пробел с помощью автоматически создаваемого альтернативного текста для изображений в Интернете.
Существующие программы чтения с экрана в настоящее время считывают “немаркированную графику”, если описание изображения вообще отсутствует, что не очень полезно. Microsoft Edge теперь обновлен, чтобы улучшить работу программы чтения с экрана для всех изображений в Интернете без текста alt.
“Когда программа чтения с экрана находит изображение без метки, это изображение может быть автоматически обработано алгоритмами машинного обучения (ML) для описания изображения словами и захвата любого содержащегося в нем текста”, — объясняет Трэвис Лейтхед, менеджер программ в команде Microsoft Edge platform. “Алгоритмы не идеальны, и качество описаний будет отличаться, но для пользователей программ чтения с экрана наличие некоторого описания изображения часто лучше, чем полное отсутствие контекста”.
Microsoft Edge теперь может отправлять немаркированные изображения в свой Azure computer vision API для обработки, которая регулируется обещаниями Microsoft о конфиденциальности. Vision API создает альтернативный текст на английском, испанском, японском, португальском или упрощенном китайском языках, который затем может быть расшифрован средствами чтения с экрана. Microsoft Edge не будет пытаться добавлять автоматические метки к изображениям размером менее 50 x 50 пикселей, очень большим файлам изображений, изображениям, помеченным как декоративные, или изображениям, которые Vision API классифицирует как порнографические, кровавые или вызывающие сексуальное влечение.
Microsoft немедленно внедряет эту новую функцию в Microsoft Edge для Windows, Mac и Linux, но она пока не будет доступна в Edge на Android или iOS. Вы можете опробовать новую функцию, включив “Получать описания изображений от Microsoft для программ чтения с экрана” в edge: // настройки / специальные возможности и используя Narrator или другое средство чтения с экрана для просмотра веб-страниц.
“Эта функция все еще нова, и мы знаем, что мы еще не закончили”, — говорит Лейтхед. “Мы уже нашли несколько способов сделать эту функцию еще лучше, например, когда у изображений есть метка, но эта метка не очень полезна. Непрерывное распознавание изображений и совершенствование алгоритмов также повысят качество сервиса”.
