基于手语的识别与翻译播报系统

发布时间:2015-10-4 阅读量:1940 来源: 我爱方案网 作者:

【导读】各种逐渐成熟的翻译软件在帮助不同国度的人更加方便的交流时,确没能照顾到另一个特殊群体:无法讲话的残障人士。他们与外界的交流只能通过手语,而手语是一门除了这些人之外很少有人会的语言,不过这款系统能完美的为它们和普通人之间搭起一道沟通的桥梁。

概述:
 
这款多功能手套不仅能捕获用户静态手势, 还能识别手在三维空间的各种方向的平动和转动,实现完整的手部运动信息检测。从而为翻译打好基础,并且该手套不仅具有手语翻译功能, 而且还可以通过上位机展示其他丰富的功能,例如:空中鼠标,数字手势识别等。
 
 
工作原理:
 
数据手套采用了最流行的一款六轴(三轴加速度+三轴角速度(陀螺仪))传感器 MPU6050 加上磁力计 HMC5883L 补偿算法组成九轴姿态传感器,配合弯曲传感器来检测手的运动和手势,
 
九轴姿态传感器安装在手套背面,它可以负责识别各种手语动作的欧拉角、加速度和角速度等值,而弯曲度传感器则分别安装在每根手指上,用来识别手指的弯曲程度。
 
使用 STM32 芯片作为数据采集芯片、采集传感器的数据并作初步的处理,然后以NRF24L01 作为无线数据传输模块把初步数据传送给 LM3S811 主控制器作进一步处理,完成核心算法,最后我们采用XFS5152CE语音合成模块来实现手语手势的翻译播报功能。
 
系统框图:
 
 
应用领域:
 
该手套可以在六大领域中得到应用:
 
1.数字手势识别与播放
 
2.字母手势识别与播报
 
3.文本输入与播报
 
4.交流场景模拟
 
5.空中鼠标
 
6.家居控制

在很多领域都可以起到很大的作用。
 
相关资讯
华为海思换帅!徐直军卸任董事长!

华为旗下核心芯片设计公司深圳市海思半导体有限公司完成重大人事调整,徐直军卸任法定代表人、董事长,由技术背景深厚的高戟接棒,同时完成多位高管的更迭

突发!美国联邦通信委员会FCC“拉黑”中国实验室

美国联邦通信委员会(FCC)发布通告:“基于国家安全考量”,FCC即刻实施新规,撤销或拒绝由“外国对手”控制的测试实验室的FCC认证资格

深度对接产业链!电子展组委会走访三省行业协会与龙头企业

为精准锚定行业需求、高效整合产业资源,全力备战2025年11月5–7日在上海新国际博览中心举办的第106届中国电子展,中国电子展组委会与电子制造产业联盟联合组建专项调研团队,于近期跨越广东、湖南、湖北三省,深入深圳、东莞、长沙、武汉四地,开展了一系列高密度、深层次的企业走访与产业对接活动。通过实地考察和多轮座谈,调研团队系统梳理了华南、华中地区电子制造产业链资源,为展会的高水平举办奠定了扎实基础。

贸泽开售适用于智能和工业物联网应用的Murata Electronics Type 2FR无主机三频无线模块

Type 2FR模块可以为智能家居、工业自动化、游戏控制器和智能配件应用提供出色的集成度、效率和多种无线电功能

贸泽电子授权代理英飞凌丰富多样的产品组合

英飞凌XENSIV™ PAS CO2 5V传感器可持续提供高质量数据,并且满足WELL™建筑标准的性能要求。