raccoon

Amazon Alexa теперь реагирует и на язык жестов!

24 июля 2018 eye22 0

«Если голос - это будущее технологий, то что же говорить о тех, кто не может говорить или слышать?»

Это вопрос был поставлен Abhishek Singh, создателем приложения, которое позволяет Amazon Alexa отвечать на язык жестов. Его проект использует систему на основе камеры для идентификации жестов и интерпретации их как текста и речи. Разработчик говорит, что будущие домашние устройства должны быть инклюзивными для глухих пользователей.

За последние несколько лет наблюдается рост популярности голосовых помощников, которыми управляют Amazon, Google и Apple. И данный проект предлагает одно из возможных решений - оснащение Amazon Alexa, чтобы была возможность ответить текстом на американский язык жестов (ASL).

«Если эти устройства станут главным способом, как мы будем взаимодействовать с нашими домами или выполнять задания, тогда необходимо подумать о тех, кто не может слышать или говорить», - говорит Abhishek Singh.

Разработчик обучил систему основам жестового языка, использовав платформу обучения Tensorflow. Как только она смогла отреагировать на его движения, он подключил ее к программному обеспечению для преобразования текста в речь, чтобы прочитать соответствующие слова вслух. Amazon Echo реагирует, и эта голосовая реакция автоматически транскрибируется компьютером в текст, который считывается пользователем.

Раньше уже были попытки создать что-то подобное, преимущественно компанией Microsoft и Nvidia, но проект Amazon Alexa с распознаванием языка жестов пока один из наиболее удачных. Amazon объявила, что на сегодняшний день у пользователей Alexa будет возможность включить титры для устройств Echo с помощью экрана.

Ранее Alexa Captioning была доступна для американских владельцев Echo Show и Echo Spot. Компания теперь предоставляет эту функцию пользователям в Великобритании, а также в Германии, Японии, Индии, Франции, Канаде, Австралии и Новой Зеландии.

Источник: https://www.bbc.com/news/technology-44891054

Оставить комментарий

avatar
  Подписаться  
Уведомление о