当前位置:动态 > 正文
Speechin项链可识别佩戴者的无声语言
2022-02-15 08:56:02 来源: 已有

如果你在商务会议或安静的图书馆突然冒出一句“Siri,检查电子邮件”其实并不合适。而这正是Speechin项链的设计初衷,因为它能识别无声语言。该实验装置由康奈尔大学的Cheng Zhang副教授和博士生Ruidong Zhang开发。

它建立在Cheng Zhang去年发布的NeckFace项链的基础上,该项链监测佩戴者的面部表情。

除了微处理器、电池和蓝牙模块外,Speechin还具有一个朝上的红外摄像头,它可对佩戴者的下巴进行成像。一组向两侧延伸的“翅膀”帮助设备保持这个方向,另还有一枚硬币作为其底部的重量。为了解决隐私问题,它并不会直接指向用户的脸。

通过利用基于机器学习的算法,该设备能根据佩戴者的下巴动作确定他们正在无声地说哪些命令。然后,它可以将这些命令转达给配对的智能手机。

该系统最初是通过监测20名志愿者的下巴运动来训练的,因为他们无声地说着已知的单词和短语--其中10人说英语,而另外10人说普通话。在随后的测试中,参与者说出了54个常用的英语命令以及44个普通话单词和短语。

事实证明,项链对英语和普通话语音的识别准确率分别为90.5%和91.6%。当志愿者在行走时使用该设备时,这些数字确实大幅下降,因为他们各自的行走方式导致他们的头部以不可预测的方式移动。

研究人员希望,一旦进一步发展,这项技术不仅可以在人们必须保持安静的环境中使用还可以在智能手机无法听到用户的嘈杂环境中使用。此外,Speechin项链还可以被那些缺乏语言能力的人使用。

访问:

京东商城

标签: Speechin项链可识别佩戴者的无声语言 cnBeta

责任编辑: jkl2