1. 我是CIO首页
  2. 资讯
  3. 新技术

可穿戴技术手套可将手语实时转换为语音

可穿戴技术手套可将手语实时转换为语音
该系统包括带有细长传感器的手套,该传感器可伸展五个手指中每个手指的长度。版权:Jun Chen Lab / UCLA

加州大学洛杉矶分校的生物工程师设计了一种类似于手套的设备,可以通过智能手机应用程序将美国手语实时转换为英语语音。他们的研究发表在《自然电子》杂志

加州大学洛杉矶分校萨穆里分校工程学院生物工程学助理教授陈俊说:“我们的希望是,这为使用手语直接与非签字人交流而无需其他人翻译的人们提供了一种简便的方法。”以及该研究的首席研究员。“此外,我们希望它可以帮助更多的人自己学习手语。”

该系统包括一副带有细长传感器的手套,该传感器沿着五个手指中的每个手指的长度延伸。这些由导电纱线制成的传感器拾取代表单个字母,数字,单词和短语的手部动作和手指位置。

然后,该设备将手指的运动转换为电信号,然后将其发送到戴在手腕上的一美元硬币大小的电路板上。电路板将这些信号无线传输到智能手机,该智能手机以每秒大约一个单词的速度将其转换为语音。

研究人员还在眉毛之间和嘴巴的一侧之间的测试者脸上增加了粘合传感器,以捕捉作为美国手语一部分的面部表情。

Chen说,以前提供美国手语翻译功能的可穿戴系统受到笨重设备设计的限制,或者穿着不舒服。

UCLA团队开发的设备是由轻便,便宜,但经久耐用的可拉伸聚合物制成的。电子传感器也非常灵活且便宜。

可穿戴技术手套可将手语实时转换为语音
系统的数字渲染,有助于将手语转换为语音。版权:Jun Chen Lab / UCLA

在测试该设备时,研究人员与四名聋哑人一起使用美国手语。佩戴者每个手势重复15次。定制的机器学习算法将这些手势转换为它们所代表的字母,数字和单词。系统识别出660个符号,包括每个字母和数字0到9。

UCLA已为该技术申请了专利。陈说,基于这种技术的商业模型将需要增加词汇量和更快的翻译时间。

本文为作者 何斌 独立观点,并不代表 我是CIO 立场。

发表评论

登录后才能评论