В рамках Глобального дня осведомленности о доступности (GAAD) Google объявил о ряде обновлений для Android, Chrome и других сервисов, включая функцию вопросов и ответов об изображениях в Lookout.
Live Caption, которая генерирует субтитры в реальном времени на Android, Chrome и Google Meet, появится на большем количестве устройств и будет доступна большему числу людей «этим летом». Она оптимизируется для планшетов Android с «новым окном субтитров» в рамках более широкого внедрения на больших экранах.
Аналогично, возможность фактически отвечать на Live Caption, набирая ответы, которые будут прочитаны вслух вызывающему абоненту, «расширяется на Pixel 4 и 5, а также на другие устройства Android, такие как избранные телефоны Samsung Galaxy и другие». Аналогично, Pixel 4, 5 и другие устройства получают поддержку Live Caption на французском, итальянском и немецком языках.
Lookout готовится представить новую функцию вопросов и ответов об изображениях, которая использует визуальную языковую модель Google DeepMind (Flamingo) для описания изображений без альтернативного текста. В свою очередь, пользователи смогут задавать несколько вопросов об изображении с помощью голоса или ввода текста.
Например, Lookout может проанализировать фотографию собаки, бегущей по пляжу, и сгенерировать следующее описание: «На этом изображении я вижу собаку, бегущую по песку. Я также вижу мяч в ее пасти. На заднем плане я вижу воду, горы и небо». Затем кто-то может спросить: «Собака выглядит игривой?» И Google ответит: «Да, собака игривая».
После нескольких месяцев внутреннего тестирования с людьми с нарушениями зрения мы сотрудничаем с Королевским национальным институтом слепых (RNIB), чтобы пригласить ограниченное количество людей протестировать эту функцию, планируя сделать ее доступной еще большему числу людей в ближайшее время.
В Maps Google повышает заметность значка доступности для инвалидных колясок, в то время как Chrome теперь может «обнаруживать опечатки в URL-адресах и предлагать сайты на основе исправлений».
Это повышает доступность для людей с дислексией, изучающих языки и всех, кто допускает опечатки, облегчая доступ к ранее посещенным веб-сайтам, несмотря на ошибки в написании. Эта функция теперь доступна в Chrome для настольных компьютеров и будет внедрена на мобильных устройствах в ближайшие месяцы.
Talkback в Chrome для Android был обновлен для анализа Tab Grid с поддержкой Tab Groups, пакетных действий с вкладками и изменения порядка.
Наконец, Google вновь напоминает о предстоящем «текстовом речевом опыте Wear OS 4, который будет быстрее и надежнее». Это последовало за добавлением двух новых звуковых режимов и режимов отображения в Wear OS 3.