这个亚马逊回声模组让alexa能够理解手语

语音接口似乎将成为未来计算机的重要组成部分；出现在手机、智能扬声器甚至家用电器中。但是这项技术对那些不使用语言交流的人有多有用呢？我们是否正在创建一个锁定特定用户的系统？...

语音接口似乎将成为未来计算机的重要组成部分；出现在**、智能扬声器甚至家用电器中。但是这项技术对那些不使用语言交流的人有多有用呢？我们是否正在创建一个锁定特定用户的系统？

这些问题激发了软件开发人员Abhishek Singh创建一个mod，让Amazon的Alexa助手理解一些简单的手语命令。在一段视频中，辛格演示了该系统的工作原理。Amazon Echo连接到笔记本电脑，通过网络摄像头（和一些后端机器学习软件）对辛格的手势进行文本和语音解码。

辛格在接受《边缘》采访时说，该项目是一次“思维实验”，灵感来自最近流行的语音助理。”辛格说：“如果这些设备要成为家庭互动或执行任务的中心方式，那么就需要考虑那些听不见或说不出的人。”无缝设计需要具有包容性。”

实际的mod本身是在Google的TensorFlow软件的帮助下**的，特别是TensorFlow.js，它允许用户用JavaScript编写机器学习应用程序（使得在web浏览器中运行应用程序更容易）。与任何机器视觉软件一样，辛格必须通过向程序输入训练数据来教程序理解视觉信号。他在网上找不到任何手语数据集，而是创建了自己的基本信号集。

该软件目前只是一个概念验证，无法读取视频中未演示的任何标志。但是增加更多的词汇相对来说比较容易，辛格说他计划开源代码，并为他的工作写一篇解释性的博客文章。”通过发布代码，人们将能够下载代码并在其基础上进一步构建，或者只是受到启发去探索这个问题空间，”他告诉《边缘》杂志。

巧合的是，昨天亚马逊发布了自己的Alexa升级版，允许用户在不使用语音命令的情况下，通过屏幕上的Echo Show与虚拟助手进行交互。这表明亚马逊至少开始考虑如何将可访问性建立在语音助理中，谁知道，理解手语可能是下一步。正如辛格的演示所显示的那样，这在技术上当然是可能的。

Signh说：“亚马逊秀，或者任何基于摄像头和屏幕的语音助理都没有理由不能直接构建这一功能。”对我来说，这可能是这个原型所展示的最终用例。”