Alexa тепер може розмовляти з членами спільноти глухих

Настільки зручними, наскільки голосовими помічниками виявилися ці інструменти на основі штучного інтелекту, вони відстають у своїй нездатності обслуговувати глухих. Але один заповзятливий комп’ютерний вчений розробив рішення, яке дозволить людям з вадами слуху відчути всі переваги і недоліки Amazon Alexa, Google Assistant і Siri нарівні з усіма іншими. Абхішек Сінгх, який вперше став відомим, коли створив гру Super Mario Bros у доповненій реальності, створив веб-додаток, який використовує камеру для зчитування мови жестів, а потім перекладає ці слова на розмовну мову для Amazon Echo. Коли Echo вимовляє свою відповідь, весь процес відбувається у зворотному порядку, в результаті чого з’являється надрукована відповідь, яку можуть прочитати люди з вадами слуху або глухі.

Цей додаток виходить за рамки псевдо-рішення, наданого Amazon Echo Show, який додав екран до хабу розумного будинку, щоб дозволити членам спільноти глухих взаємодіяти з помічником розумного будинку. Однак це все одно не дозволяло Alexa і її користувачеві по-справжньому вести бесіду – пропозиція Сінгха, однак, це виправляє.

“Проект був уявним експериментом, натхненним спостереженням за тенденцією серед компаній просування голосових помічників як способу створення миттєвих, безшовних взаємодій”, – сказав він Fast Company. “Якщо ці пристрої стануть основним способом взаємодії з нашими будинками або виконання завдань, то необхідно подумати про тих, хто не може чути або говорити. Безшовний дизайн повинен бути інклюзивним за своєю природою”.

При створенні системи Сінгх навчав систему штучного інтелекту в рамках платформи машинного навчання Tensorflow, підписуючи слова через свою веб-камеру до нудоти, щоб “навчити” систему мови жестів. Потім він додав можливості Google з перетворення тексту в мову для того, щоб перекласти мову жестів в усні слова.

Хоча рішення Сінгха є елегантним, кодер все ще сподівається, що Amazon зрештою розпізнаватиме мову жестів самостійно. “Я сподіваюся, що це станеться саме там. І якщо цей проект призведе до поштовху в цьому напрямку, то місія буде виконана”, – сказав він. “В ідеальному світі я б побудував це безпосередньо на шоу, але пристрої ще не настільки зламані, щоб їх можна було зламати, і я не зміг знайти спосіб зробити це”.

Рекомендації редакторів

• Найкращі навички Alexa для використання на вашому Amazon Echo у 2023 році
• Найкращі поради та підказки для Amazon Echo
• Google розгортає підтримку Matter для Nest та Android
• Apple TV: Ціна, обладнання, програмне забезпечення та інше
• Ikea та Sonos співпрацюють над новою колонкою для торшера Symfonisk

Source: digitaltrends.com