手套将手语转化为实时演讲

UCLA生物工程设计了一种类似手套的设备,可以通过智能手机应用程序实时将美国手语转化为英语演讲。

照片
该系统包括带有可伸缩传感器的手套,传感器的长度可以覆盖五根手指。
资料来源:加州大学洛杉矶分校陈俊实验室

“我们的希望是,这对使用手语直接与非签名者进行沟通的人来说,这是一个简单的方法,而无需为他们转换为他们,”在UCLA Samueli工程学院生物工程助理教授Jun Chen表示以及研究的主要调查员。“此外,我们希望它可以帮助更多的人学习手语。”

该系统包括一对具有薄,可伸展的手套传感器运行五个手指中的每一个的长度。这些传感器由导电纱线制成,拾取手动动作和手指放置,这些手指展示为单个字母,数字,单词和短语。

设备然后将手指的动作转化为电信号,发送到手腕上一个硬币大小的电路板上。电路板将这些信号无线传输到智能手机上,智能手机将这些信号以大约每秒一个单词的速度翻译成口语。

研究人员还在测试者的眉毛之间和嘴的一侧添加了附着式传感器,以捕捉作为美国手语一部分的面部表情。陈说,以前提供美国手语翻译的可穿戴系统受到笨重设备设计的限制,或者佩戴起来不舒服。

照片
系统的数字渲染,有助于将手语转换为语音。

该设备由加州大学洛杉矶分校的研究小组开发,由轻质、廉价但耐用、可拉伸的聚合物制成。电子传感器也非常灵活和便宜。

在测试该设备时,研究人员与四名使用美国手语的聋人合作。每个手势重复15次。一种定制的机器学习算法将这些手势转换成它们所代表的字母、数字和单词。该系统识别了660个符号,包括字母表中的每个字母和从0到9的数字。

加州大学洛杉矶分校已经为这项技术申请了专利。陈说,基于该技术的商业模式需要增加词汇量和更快的翻译时间。

这项研究发表在杂志上自然电子产品

订阅我们的时事通讯

相关文章

当病毒性疾病恶化时,贴片可以检测到

当病毒性疾病恶化时,贴片可以检测到

Xsensio已获得欧盟180万瑞士法郎的资助,用于改造其实验室皮肤传感贴片,以便检测流感或COVID-19等病毒性疾病何时会恶化。

智能手表变身生化监控系统

智能手表变身生化监控系统

工程师设计了一种薄薄的粘合剂,可以将消费者智能手表升级到强大的健康监测系统中。

Elsah  - 一个“智能补丁”以确定生物标志物

Elsah - 一个“智能补丁”以确定生物标志物

2019年初,欧盟ELSAH项目的目标是在四年内设计出一种可穿戴设备,能够持续测定生物标志物浓度。

更新Apple心脏研究:可穿戴设备可以检测AFIB

更新Apple心脏研究:可穿戴设备可以检测AFIB

这项临床试验旨在确定一款能够分析脉搏率数据的智能手表应用程序是否能够筛查出心脏节律障碍,目前已招募了40多万名参与者。

石墨烯——万能的神奇材料

石墨烯——万能的神奇材料

石墨烯在创造新材料方面具有各种实际应用。但是石墨烯究竟是什么,是什么让它如此特别?

智能绷带为伤口管理带来希望

智能绷带为伤口管理带来希望

可穿戴传感器检测多种慢性伤口生物标志物,以促进及时和个性化的伤口护理。

将人体动作转化为电力

将人体动作转化为电力

生物工程师们发明了一种新型的柔性自供电生物电子装置,可以将人体运动转化为电能。

可穿戴设备在你睡觉时收获能量

可穿戴设备在你睡觉时收获能量

工程师们已经开发出一种可以戴在指尖上的可弯曲的带子,当人们的手指出汗或按压时,就会产生少量的电能。

专为拔毛症患者设计的手套传感器

专为拔毛症患者设计的手套传感器

强迫袭击其头发的人 - 患有称为Trichotillomania的痛苦 - 可以用新设备找到浮雕。

流行文章

订阅简报
Baidu