Американски програмист създаде софтуер, който позволява на грухонеми хора да комуникират с гласовия асистент Алекса - с помощта на жестомимичен език. Камерата на лаптопа разпознава жестовете и ги конвертира в гласови команди. След това конвертира отговора на Алекса в текстови формат.
Много технологични компании считат гласовия контрол за един от основните начини за комуникация в „умни къщи“. През последните няколко години интелигентните колонки станаха доста популярни - при тях гласовото въвеждане е единственият начин да комуникирате с устройството. Това е доста удобно, но пък хора с нарушение на слуха няма как да ги използват.
Програмистът от САЩ Абхишек Сингх (Abhishek Singh) създаде софтуер, който действа като посредник между глухоням човек и гласовия помощник Алекса. Програмата работи на лаптоп и използва вградената му камера за разпознаване на жестовете.
Потребителят дава команди с езика на знаците, а лаптопът в реално време разпознава думите и ги произнася с помощта на системата за синтез на речта - и ги изписва на екрана. В същото време високоговорителят чува и разпознава думите на компютъра и след кратко време изписва казаното. Интерфейсът на приложението е разделен на две части и е проектиран като диалог между потребителя и гласовия асистент. Разработчикът планира да пусне изходния код на приложението в GitHub.