Google запустила приложение для смартфонов Look to Speak, предназначенное для людей с нарушениями моторных и речевых функций. С его помощью пользователи смогут использовать собственные глаза, чтобы выбирать на экране нужные фразы.
Приложение Look to Speak использует технологию отслеживания взгляда и работает с фронтальной камерой устройств на платформе Android, чтобы иметь возможность быстро и легко идентифицировать глаза пользователя. Отслеживая их движения, приложение позволяет человеку выбрать из списка предложенных фраз ту, что он хотел бы сказать, а затем озвучивает её.
Разработчики создали Look to Speak специально для людей, имеющих какие-либо нарушения моторной и речевой функций, однако его смогут использовать все пользователи смартфонов на Android. Приложение совместимо с версиями ПО от 9.0 и выше, включая устройства из линейки Android One. Запуск приложения состоялся в рамках миссии по расширению спектра специальных функций для удобства людей с ограниченными возможностями, приуроченной к Международному дню инвалидов. Ранее свои варианты также предложили соперники Google. К примеру, компания Amazon представила расширение к линейке смарт-устройств Echo Show «Show and Tell», с помощью которого Alexa поможет людям с дефектами зрения идентифицировать окружающие их предметы. В свою очередь продукция Apple получила обновление фирменного сайта, на котором собраны руководства по быстрому поиску и активации встроенных инструментов специальных возможностей.
На тематической странице Google о целях и принципах работы приложения Look to Speak рассказал британский логопед Ричард Кэйв, который приложил руку к его разработке. На рынке представлены различные коммуникационные девайсы для людей с ограниченными моторными и речевыми функциями. Они используют технологию отслеживания взгляда, чтобы пользователи могли набирать сообщения при помощи глаз. Теперь аналогичный функционал доступен и на обычных смартфонах. Приложение Look to Speak позволяет пользователям простыми движениями глаз выбирать нужные фразы из списка готовых предложений. В зависимости от настроек, выбор фразы производится взглядом налево или направо. При этом необходимо, чтобы пользователь отвёл взгляд от экрана в заданном направлении, удерживая голову на месте, чтобы технология могла расшифровать его движения.
Интерфейс приложения Look to Speak представляет собой два столбца с 16 фразами. К примеру, пользователь хочет озвучить фразу «Как дела?», расположенную в правом столбце. В таком случае первый взгляд вправо отбросит фразы левого столбца и реорганизует оставшиеся 8 фраз в две равные колонки. Пользователю будет необходимо повторять эти действия, пока фраза «Как дела?» не останется единственной опцией. В любой момент человек может взглянуть вверх, чтобы начать отбор фраз с нуля, либо, чтобы поставить паузу и продолжить процесс позже.
Пока что Look to Speak не полностью подконтролен глазам: для настройки приложения необходимо физически нажимать на экран, потому людям с нарушением моторных функций понадобится стороння помощь. В настройках можно отрегулировать чувствительность технологии отслеживания взгляда, редактировать набор базовых фраз и просмотреть обучающие видео по эксплуатации приложения. Все данные, в том числе и отредактированные фразы, навсегда остаются в памяти смартфона и не связаны с какими-либо облачными хранилищами, потому пользователям не нужно переживать о защищённости своей информации.