便携式智能手语翻译系统

合集下载

智能手语手势翻译手环方案设计

智能手语手势翻译手环方案设计

智能手语手势翻译手环目前,市场上智能手环的样式是越来越多,可是那都是针对正常群体所制造的。

可是厂商们忽略了一点那就是特殊群体,所以在2013年这款可以翻译哑语的智能手环诞生了。

这款由优软众创技术公司工程师设计的一款智能手语翻译手环,它可以利用肌电图传感器、陀螺仪、距离感应器等组件结合一套算法来解析手语的动作,听障人士按照手语标准动作来移动他们的手时,这个手环就能实时的将这些手势动作转换成语音或者文字数据播放展示给对方。

依靠NFC或者蓝牙技术连接到手机时,还可以直接把翻译后的信息或者语音发送到对方的智能手机上。

因为手语需要两只手结合的手势来完成,所以这个手环是左右手一对的。

功能特点这款智能手环,可以进行普通人和聋哑人之间的翻译,让那些特殊群体和我们一样,我们可以正常的交流。

这款智能手语翻译手环利用肌电信号的传感器、陀螺仪传感器和距离传感器对手势进行解码。

手环利用肌电信号传感器、陀螺仪传感器和距离传感器对手指动作进行解码,距离传感器被应用到指甲尖上,这样就能追踪到手指动作,解码出手语含义,从而转换成语音,让听人“听到”意思。

手环还可以将说话内容翻译成手语手势,显示在手环屏幕上,让聋人看到说话内容,成为聋人与有声世界沟通的纽带。

听障人士的手语翻译完,我们说的话也同样可以通过这玩意儿翻译给听障人士,我觉得这个功能是个亮点,很好很强大。

它可以一句一句的通过语音识别来记录对方所说的话,然后内置的手语手势动作图像会显示在手环上的LED显示屏中,这样就可以正常交流啦!这款智能手环是可以感应到用户的思想的。

当传感器被应用到指甲尖上,聋哑人就可以使用手语进行沟通,通过指甲尖的距离传感器能追踪手势的动作,智能手语翻译手环显示在手环的屏幕上,同时文本也可以转换成手势图形。

然后发送到收件人的智能手机上;智能手语翻译手环还包含扬声器,可以直接传输语音数据。

沟通更加方便,没有障碍。

跨越无声世界:智能手表在手语识别与翻译中的革命性应用

跨越无声世界:智能手表在手语识别与翻译中的革命性应用

跨越无声世界:智能手表在手语识别与翻译中的革命性应用在科技飞速发展的今天,智能设备不再仅仅是生活的点缀,它们正逐渐成为沟通的桥梁,尤其是对于那些生活在无声世界中的人们。

手语,作为一种重要的沟通方式,长久以来面临着技术解读的难题。

而今,随着智能手表技术的成熟,我们似乎找到了一种新的可能性——将手语转化为有声语言,让沟通无障碍。

智能手表:手语识别的新纪元手语识别技术的研究,一直是一个充满挑战的领域。

传统的视觉识别方法,依赖于大量的图像或视频帧处理,这不仅计算量大,而且容易受到环境噪声的影响。

然而,随着智能手表的普及,一种基于手势的识别方法逐渐走入研究者的视野。

智能手表以其便携性和实时性,为手语的即时翻译提供了可能。

多特征框架:深度学习的突破在众多研究中,一种基于双向长短期记忆网络(BLSTM)的多特征框架尤为引人注目。

这种框架通过从智能手表收集的手势数据中提取多种特征,包括时域特征、频域特征以及基于卷积神经网络(CNN)的特征,然后将这些特征输入到BLSTM模型中,以识别手语。

这种方法不仅提高了识别的准确性,而且减少了翻译的延迟,为实时沟通提供了强有力的技术支持。

实时翻译:打破沟通障碍实时翻译是手语识别技术的终极目标。

通过将智能手表与移动设备相结合,研究者们开发出了一种便携式的手语收集和翻译平台。

这个平台不仅能够简化手语数据集的收集过程,还能够实时识别智能手表数据中的手语,从而实现实时翻译。

这对于听障人士来说,无疑是一个巨大的福音。

未来展望:技术的无限可能尽管目前的技术已经取得了显著的进步,但手语识别领域仍然有广阔的发展空间。

未来的研究可以进一步探索更多的特征提取方法,以提高识别的准确性。

同时,也可以尝试将其他深度学习模型,如ResNet或BERT,应用于手语识别中,以探索更多的可能性。

此外,智能设备的计算能力也在不断提升,这为手语识别技术的发展提供了更多的可能性。

例如,使用Jetson Nano等边缘计算设备,可以进一步缩短翻译延迟,提高翻译的实时性。

微软正在研发Kinect手语翻译机

微软正在研发Kinect手语翻译机

微软正在研发Kinect手语翻译机
据外媒报道,微软研究院正在使用Kinect为无法说同一种语言的人们搭建一座沟通的桥梁。

正如下面视频中展示的一样,Kinect手语翻译机(Kinect Sign Language Translator)是微软正在研究的一种原型机,它可将手语翻译成口语(反之亦然),而且最强的地方在于这个过程是实时的。

/programs/view/m9uSPkUUZLA/?resourceId=0_0 6_02_99
简单来说,该系统通过Kinect捕捉手势,利用机器学习与模式识别程序来理解其含义,从而实现双向沟通,比如一位失聪用户可通过手势与一位正常的用户交流,而后者无需懂得手语的意思,因为这些手势将被实时翻译成口语和书面语言,相反也是同样的道理。

很明显,这是一项了不起的成就,不过研究人员依然有很多工作要做。

现在,一句话就需要5个人去建立识别模式,而且中文手语目前仅加入了300个,而总共则有4000个。

Kinect 手语翻译机项目经理吴国斌表示,最具挑战的部分就是识别,在尝试过数据手套和摄像头之后,Kinect最终还是成了最合适的选择。

吴国斌表示,目前在中国有大约2000万人有听力障碍,而全世界则有3.6亿人有相同遭遇。

因此,该项目走出实验室之后,将造福全球数以百万计的人类。

/news/91832.html。

“你说我懂”移动设备手语识别系统

“你说我懂”移动设备手语识别系统

物联网技术 2017年 / 第6期 81 作品简介我国听力、语言残障人士超过2 000万人,然而全球有近5亿人饱受交流障碍的困扰。

聋哑人之间基本的交流方式是“手语”,虽然这使他们内部之间的交流方便很多,但与正常人交流时,却常常因为对方不理解手语造成交流困难。

“手语识别”是指通过采集设备获得聋哑人的手语数据,采用模式识别算法,结合上下文知识获知手语含义,进而翻译成语音,传达给不懂手语的正常人,从而“听懂手语”。

现有的主流手语识别设备是基于数据手套的手语识别系统,利用数据手套和位置跟踪器测量手势在空间运动的轨迹和时序信息,其缺点明显,如穿戴复杂,设备昂贵,不易携带与推广。

基于此,本课题组设计了一套便于装载在可移动便携设备如手机、平板上的手语识别系统,能够对手语进行实时传输分析并转换成音频输出,为打手势者配备“同步翻译师”,解决交流困难这一难题。

手语示例如图1所示。

该手势识别系统主要基于图像处理与分析技术,考虑到实时交流的通畅性和便利性,设计的识别系统选择手机等移动设备作为图像摄取端和文字语音输出端,即将照相机镜头对准对方手势进行拍摄,避免了传统加载诸多传感器带来的操作不便和数据处理方面的困难。

图1 手语示例识别系统将主要的处理模块以“中继服务器”的形式分离出来,通过与手机终端设计的App 结合使用,对拍摄手势进行实时处理,随后以文字的形式显示或语音的方式播放,达到有需求就能下载,下载后就能立即翻译的效果,辅以文字和语音等多种输出形式,辅助解决聋哑人与常人交流困难的 “你说我懂”移动设备手语识别系统摘 要:针对我国听力、语言残障人士交流困难的问题,文中设计了一款“你说我懂”移动设备手语识别系统。

该系统可装载在手机、平板等移动设备上,能够对手语进行实时传输分析并转换成音频输出,解决了残障人士与正常人沟通不畅的难题,具有良好的社会效益与经济效益。

关键词:手语识别;同步翻译现数据的一体化管理。

(2)通过增加子模块增加系统的量程,减少系统升级的成本。

手语翻译系统的设计与实现

手语翻译系统的设计与实现

手语翻译系统的设计与实现一、引言手语作为聋哑人士最主要的交流方式之一,由于其具有不同于日常常规语言的独特特点,因此通常需要专业的手语翻译来实现有效的沟通。

近几年,随着人工智能技术的进步以及智能硬件的不断普及,手语翻译系统得以快速发展,成为了一门备受关注的研究领域。

本文旨在介绍一种手语翻译系统的设计与实现,以期为相关从业者提供参考和借鉴。

二、手语翻译系统的构成一个完整的手语翻译系统通常需要包含以下几个部分:手势信息采集模块、手势识别模块、手语翻译核心模块以及显示及播放模块。

1.手势信息采集模块手势信息采集模块负责手语动作的采集和处理,通常采用传感器等硬件设备实现。

该模块应该能够对手势进行准确的识别、捕捉以及图像处理等工作,为后续的手语翻译提供充分的数据支持。

2.手势识别模块手势识别模块是手语翻译系统的重要组成部分,其目的是将手势信息转化为可识别的文字或者音频信息,通常需要依托于先进的智能图像识别技术和自然语言处理技术等来实现。

具体操作包括预处理手势图像、图像特征提取、特征匹配识别、语义理解等环节。

3.手语翻译核心模块手语翻译核心模块是整个系统的重点,其主要作用是将识别出的手语文字或音频信息进行翻译转换,将其转换为能够有效传达信息的目标语言。

为了实现这个目标,我们需要借助于大规模数据集和语音信号处理技术等资源,以尽可能提高翻译质量和准确度。

4.显示及播放模块显示及播放模块负责将翻译后的信息展示出来,可以通过LCD 屏幕、扩音器、互联网平台等方式进行传播。

该模块的功能包括语音合成、文字显示、字幕生成、声音播放等操作。

三、手语翻译系统的实现手语翻译系统的实现需要结合上述几个方面的模块来协同工作,以达到优秀的效果。

以下,本文我们以国际通用手语语言ASL为例,介绍一下系统的具体实现流程。

1.手势信息采集手势信息采集部分通常基于深度学习技术,使用RGB-D摄像机采集手势信息,并使用OpenNI或Kinect SDK之类的软件对这些数据进行预处理。

适用于手语采集与输入的智能手套及翻译系统

适用于手语采集与输入的智能手套及翻译系统

适用于手语采集与输入的智能手套及翻译系统智能手套:手语采集与输入的革命性创新引言在全球范围内,有约7000种不同的语言被使用着。

然而,手语作为一种非口头交流方式,在视障人士、聋哑人士和语言障碍者中扮演着重要的角色。

为了解决手语交流的难题,研究人员开发了一种创新的技术——适用于手语采集与输入的智能手套及翻译系统。

本文将深入探讨这项令人振奋的科技,并展望其未来的前景。

一、智能手套的原理与设计智能手套是一种利用先进技术把手语转化为可识别文本的设备,其主要构成包括传感器、处理器、无线通信模块和电池。

每个手指上都装有高灵敏度的传感器,能够准确捕捉手指和手部的微小运动。

这些传感器将采集到的手语动作数据传输到处理器,由处理器进行分析和识别,并将结果通过无线通信模块传送到相应的设备。

电池为设备提供持久的电力支持。

二、智能手套的功能与应用1. 手语采集智能手套能够精确地采集并记录使用者的手语动作。

通过传感器的高灵敏度检测,手指的细微运动能够被准确捕捉并转化为电子数据。

这样,聋哑人士和语言障碍者就能够更加方便地表达自己,而教育工作者和研究人员也可以更好地研究和传授手语。

2. 手语输入智能手套的另一个重要功能是将手语动作转化为文本输入。

设备内置的处理器能够对采集到的手语数据进行分析和识别,进而将其转化为可读的文字。

这使得视障人士和聋哑人士能够更加便捷地与其他人交流,同时也方便了信息的记录与保存。

3. 翻译系统智能手套结合了机器学习和人工智能技术,使得其具备实时的翻译能力。

通过与智能手机等设备的连接,智能手套能够将手语动作直接转化为其他语言的文字或语音。

这在国际交流、旅行和商务活动中具有巨大潜力,能够极大地方便跨文化交流。

三、智能手套的优势与挑战1. 优势(1)高准确性:智能手套采用先进的传感器技术,能够实时高精度地捕捉手语动作,保证了数据的准确性。

(2)便携性:智能手套体积小巧,便于携带,并且内置电池提供持久的电力支持,方便用户长时间使用。

便携式商务英语翻译装置

便携式商务英语翻译装置

便携式商务英语翻译装置随着全球化进程的加速和跨国交流的增多,商务英语的重要性日益凸显。

然而,不是每个人都能熟练掌握商务英语,这给国际商务交流带来了一定的难度。

为了解决这一问题,便携式商务英语翻译装置应运而生。

本文将介绍便携式商务英语翻译装置的功能和优势,并探讨其对商务交流的影响。

便携式商务英语翻译装置是一种小巧轻便的电子设备,配备了强大的翻译功能。

它可以将商务文档、演讲和对话等英语内容实时翻译成其他语言,包括但不限于汉语、法语、西班牙语等。

使用者只需将装置对准要翻译的内容,即可快速获取准确的翻译结果。

这种翻译装置不仅具备高精度的语音识别和翻译功能,还支持文字输入和输出,便于用户灵活选择交流方式。

便携式商务英语翻译装置的功能十分强大。

首先,它可以实现实时的语音翻译,将口语表达转化为文字或其他语言的口语表达,大大提高了跨语言交流的效率。

其次,它支持文本翻译,能够将商务英语文档、邮件等内容快速翻译成其他语言,方便用户进行文本交流。

此外,该装置还具备词典查询功能,用户可以随时查询单词、短语、常用句型等商务英语知识,提高语言应对能力。

最后,该装置还支持语音播放和录音功能,用户可以将翻译结果以语音形式播放给对方,或者记录重要的商务对话。

便携式商务英语翻译装置具有多种优势。

首先,它的便携性使得用户可以随身携带,方便跨国商务出差或旅游时使用。

其次,该装置的翻译准确度高,能够满足商务交流的需求。

它采用先进的机器学习和人工智能技术,不断学习和优化翻译算法,提供更准确、流畅的翻译结果。

另外,该装置还拥有强大的计算能力和存储空间,能够处理大量的语音和文本数据,支持多种语言的翻译。

便携式商务英语翻译装置对商务交流的影响是深远的。

首先,它缩小了语言障碍,促进了国际商务交流的顺利进行。

无论是商务洽谈、会议演讲还是日常沟通,用户可以借助这种装置快速准确地与对方进行交流,实现商务合作的无缝对接。

其次,它提高了商务人士的工作效率。

低功耗便携智能翻译手套系统

低功耗便携智能翻译手套系统

引言
聋 哑 人 只 能 通 过 手 语 进 行 相 互 交 流 ,他 们 与 正 常 人 的 交 流存在极大的障碍。本系统设计了一款低功耗便携式的智能 手 语 翻 译 手 套 ,相 比 于 上 述 的 手 势 捕 获 技 术 ,具 有 众 多 优 势 。 该 手 套 能 精 确 的 记 录 手 势 的 空 间 数 据 ,不 存 在 手 势 死 区 ,并
1. 总体结构与工作原理
系统以低功耗、便捷、准确翻译为设计原则。数据端
以 STM3 2 为微处理器,采用弯曲传感器、接触式传感器、
陀螺仪等传感器分别进行手指弯曲程度、手势在空间中的姿 态数据的采集。数据端将采集到的手势数据通过数据融合、
滤 波 处 理 ,经 WIFI传 到 识 别 端 。 识 别 端 使 用 Cortex-A53 处 理器,使用动态时间规整算法,与 S D 卡中的模板手势库
角 度 、加 速 度 做 类 似 处 理 ,分 别 得 到 最 优 路 径 值 ,归 一 化 , 加 权 和 得 到 总 距 离 值 。通 过 大 量 试 验 ,得 出 最 佳 权 值 组 合 和
P W W 2),…Y(x )}, 规 整 函 数 点 对 YW = (7?W ,YCW ) , Ys(x)e {l,2,...,/«},Ye(x)e {l,2,...,《} , Y(x) 表 示 模 板 手 势 Q 第 Y,卜)个矢量与输入手势C 的第Ye卜)个矢量构成的点对。
样值进行分段处理。设 定 段 间 距 为 7 0 , 共 分 为 1 0 段 ,即当 采样值与模板值相差小于7 0 , 则在第零段中:欧式距离为0;
动 态 吋 间 规 划 算 法 通 过 动 态 规 划 算 法 寻 找 输 入 序 列 当两者距离在7 0 至 1 4 0 之 间 ,则 在 第 _段 中 ,欧式距离为1,

手语翻译系统手语翻译装置及手语翻译方法

手语翻译系统手语翻译装置及手语翻译方法

手语翻译系统手语翻译装置及手语翻译方法
一、手语中文翻译系统
手语中文翻译系统是一种以视频为基础的语音识别、处理和生成系统,它能够将手势语言转换成中文文本。

该系统应用了机器学习、图像处理等
技术,能够识别出用户的手势并转换成文字。

它还支持智能化技术,能够
根据用户的语言习惯自动调整翻译结果,从而提高翻译准确率。

二、手语中文翻译装置
手语中文翻译装置是用于实现手势语言识别及翻译的设备。

装置的主
要部件包括摄像头、录音模块、处理器、显示器等。

摄像头用于捕捉手势
输入,录音模块用于录取说出的中文字,处理器用于处理捕捉的手势信息,并将其转换为机器可以理解的信息,最后在显示器上将手势信息转换成中
文文本,供用户查看。

三、手语中文翻译方法
手语中文翻译方法主要包括三步:
(1)捕捉手势输入:首先,使用摄像头捕捉用户手势输入,并存储
在计算机中;
(2)处理手势输入:然后,运用计算机视觉技术和机器学习技术对
存储的手势图像进行处理,并将其分类存储;
(3)生成中文文本:最后,运用语音识别技术将存储的手势图像转
换成中文文本,供用户查看。

智能手语翻译

智能手语翻译

智能手语翻译作者:宋纪元冷峻段向南李浩亮来源:《物联网技术》2017年第10期摘要:针对中国乃至全世界范围内聋哑人与正常人之间交流困难的问题,设计了智能双向仿生手语翻译系统。

本系统可实现手指弯曲度检测、手的空间运动轨迹检测、手势状态与手语库匹配、发音及文本信息显示等功能,能够及时准确地处理各种手语手势信息进行手语转语音和语音转手语的双向翻译,且翻译速度快,实时性好,识别率高,适应能力强。

关键词:手语;双向翻译;智能系统1 作品简介智能双向仿生手语翻译系统是基于STM32微处理器进行智能化控制的手语手势实时翻译设备。

它将弯曲传感器等器件与全自主开发的32自由度仿生机械手臂相结合,通过特定的算法,实现及时准确地处理各种手语手势语音信息,实现手语转语音和语音转手语的双向翻译,翻译速度快,实时性好,识别率高,适应能力强。

2 原理结构2.1 模块组成作品的主要模块如图1所示。

(1)STM32微处理器该处理器用于采集弯曲传感器和MPU-6050运动传感器的实验数据,通过算法处理数据判断手势信息,然后与手语库匹配翻译手语。

(2)弯曲传感器弯曲传感器弯曲时其阻值会发生改变,可以反应手势信息,该弯曲参数可以通过串口传递至上位机,方便观察和调试。

(3)MPU-6050运动传感器当手做出动作时,模块中的三轴陀螺仪、三轴加速器传感器能够获取相关数据,判断出手的空间运动状态。

(4)OLED显示屏显示识别出的手语手势的文本信息,同时具有实时时钟显示及定时功能。

(5)语音合成模块播放识别出的手语手势信息。

(6)蓝牙模块方便下载和调试程序,与手机通讯,通过将手势转换为文字并传送到手机上,实现与手机通信以及手势编辑文字的功能。

2.2 主要功能作品的结构框图如图2所示。

本作品的主要功能如下:(1)手指弯曲度检测功能。

位于五个手指背面的五个弯曲传感器能够及时快速地感知手指的弯曲程度,微处理器能及时获取弯曲传感器的弯曲参数,并通过相应的算法处理所获取的参数,进而对手势信息做出更合理的判断。

基于语音识别的便携式智能翻译机设计

基于语音识别的便携式智能翻译机设计

基于语音识别的便携式智能翻译机设计智能翻译机是一种方便、实用的工具,在跨语言交流方面具有不可替代的作用,但现有的智能翻译机仍然存在很多局限性,如语音识别不够准确、翻译结果不够准确等。

因此,设计一款基于语音识别的便携式智能翻译机对于用户来说是一件十分重要的事情。

首先,智能翻译机使用的语音识别技术需要足够精准,才能保证翻译结果的准确性。

目前,一些智能翻译机在语音识别方面已经取得了一定的进展,但还有不少问题有待解决。

在设计新型智能翻译机时,需要采用更加先进的语音识别技术,例如深度学习算法,以提高准确率。

其次,智能翻译机的翻译能力也非常关键。

当前智能翻译机的翻译效果已经相当不错,但有些单词、短语等较为生僻的内容还是难以识别和翻译。

在新机型的设计中,如果能够集成多个翻译引擎,以及增加现有的翻译库,或许能够更好地解决这个问题。

再者,如果这款翻译机可以提供多语种翻译,将会为用户带来很大的便利。

它需要支持较为广泛的语种,例如中文、英文、西班牙语、俄语、法语等,以及一些地方语言或方言,这样才能够真正地满足用户的需求。

同时,还要支持离线翻译,不需要一直连接互联网。

这样用户在旅行时,就不会因网络不稳定而无法翻译。

还有一项需要着重考虑的是机器的用户体验。

设计师需要考虑机器的外形美观度,需要设计出方便携带的外形,这样用户在出门带着它时,不会感觉不便捷。

同时,智能翻译机在使用时需要考虑操作的简便性,为了方便用户使用,需要设计出直观简单的用户界面。

最后,这个新型的智能翻译机还需要考虑安全问题。

在用户使用时,机器往往会接触到用户的私人信息,如身份证号码等。

为了保护用户的隐私,需要在设计时充分重视数据安全性,并采取一系列技术手段确保用户数据的安全。

总之,基于语音识别的便携式智能翻译机是一个非常有用且必要的工具。

在设计时,需要充分考虑语音识别精准度、翻译效果、语种多样性、用户体验和安全性等因素。

只有在这些方面都达到了更高的标准,才能为用户提供更好的翻译服务。

一种便携手语自动翻译系统[发明专利]

一种便携手语自动翻译系统[发明专利]

专利名称:一种便携手语自动翻译系统
专利类型:发明专利
发明人:刘保龙,颜利娟,刘燕芳,李龙韬,张正珣,陈同,吴冬雨申请号:CN200910223466.7
申请日:20091117
公开号:CN102063824A
公开日:
20110518
专利内容由知识产权出版社提供
摘要:本发明涉及一种便携手语自动翻译系统,包括三维坐标传感器,三维坐标传感器低压电源线,三维坐标传感器低压电源,手套,扬声器控制线,扬声器,坐标接收装置,数据线和翻译系统,三维坐标传感器均匀分布在手套上,且三维坐标传感器通过三维坐标传感器低压电源线与三维坐标传感器低压电源相连;坐标接收装置无线接收三维坐标传感器的坐标信号,坐标接收装置并与翻译系统通过数据线相连,翻译系统通过扬声器控制线连接扬声器。

当进行手语翻译时坐标接收装置以自身为原点建立三维坐标系,三维坐标传感器将手语者手型及手方位坐标变化传至坐标接收装置,经处理后由数据线传至翻译系统翻译成语音模式经由扬声器控制线传至扬声器发声。

申请人:刘保龙
地址:250101 山东省济南市历城区凤鸣路山东建筑大学
国籍:CN
代理机构:济南圣达知识产权代理有限公司
代理人:王吉勇
更多信息请下载全文后查看。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
Abstract:A portable intelligent real-time sign language translation system is introduced.The system uses Flex2.2 bend sensor, MPU6050 six-axis sensor to acquire gesture feature information which will be transferred to the STM32 microprocessor.W hen gesture feature information is processed by the algorithm,sign language infor m ation will be gained which can be translated into voice and text messages in real time by speech synthesis module and OLED display.Sign language infor m ation is transmitted to the useVs smart phone via Bluetooth which can be edited into a shor t message by APP.Adopting the humane and personalized glove designs,the system has broad application prospects with high processing speed,high recognition rate,strong adaptability, simple operation and many other features. Key words:STM32;gesture feature inform ation;gesture recognition;sign language translation
文 章 编 号 :l674—6236(2O16)O7一Ol6O一04
The poage translation system
ZHANG Xiao-ning ,MAO Xiao-bo2,CHEN Wan-jie ,LI Hao-liang2,SUN Shi-pu (1.School ofPhysical 船e n Zheng ̄hou University,Zhengzhou 450001,China; 2.School o f Electrical Engineering,Zhengzhou University,Zhengzhou 450001,China)
化 的 手 套 外观 设 计 ,具 有 处理 速 度 快 、识 别 率 高 、适 应 能 力 强 、操 作 简 单 等 特 点 ,应 用 前 景 广 阔 。
关 键 词 :STM32;微 处 理 器 ;手 势特 征 信 息 ;手 势识 别 ;手 语 翻 译
中 图分 类 号 :TN6
文 献标 识 码 :A
第 24卷 第 7期
Vol_24 No.7
电 子 设 计 工 程
Electronic Design Engineering
2016年 4月
ADr.2016
便携 式智 能 手语翻译 系统
张 肖宁 ,毛晓 波 ,陈婉 杰 ,李 浩 亮 2 7孙 世 璞
(1.郑 州 大 学 物理 工程 学 院 ,河 南 郑 州 450001;2.郑 州 大 学 电气 工 程 学 院 ,河 南 郑 州 450001)
据 中 国残 联 提 供 的 数 据 , 目前 国 内 听 力 残 疾 人 达 2054 万 人 ,语 言 残 疾 人 达 130万 人 ,占 中 国人 口 总 数 的 1.67%。他 们 大 都 使 用 手 语 进行 交 流 ,而 真正 能理 解 手 语 的普 通 人 却 很 少 ,无 法 及 时 正 常 地 交 流 沟 通 ,这 给聋 哑人 的生 活 带 来 了极 大 的 困 扰 。同 时 不 同 地 区 、民族 的手 语 也 略 有 不 同 ,这就 造 成 了 聋 哑 人 之 间 的 相 互 交 流 不顺 畅 等 问题 。然 而 ,目前 市场 上 尚 未 出现 普 及 性 的 实 时 手 语 翻译 设 备 。在 此 介 绍 一 款 功 能 齐 全 、新 颖 实 用 的 便 携 式 手 语 翻 译 系 统 。
此 款 便 携 式 智 能 手 语 实 时 翻译 系 统 在集 成 实 时监 测 手 指 弯 曲度 、手 部 空 间 运 动 轨 迹 等 多 项 手 势 特 征 信 息 实 现 准 确 匹 配 手 语 库 的 同 时 ,结 合 当下 快 速 普及 的 Android智 能 系 统 ,将 最 大 化 地 为 用 户 提 供 方 便 。
摘 要 :介 绍 一 款 便 携 式 智 能 化 手 语 实 时 翻 译 系统 。 利 用 Flex2.2弯 曲传 感 器 、MPU-6050六 轴 传 感 器采 集 手 势 特 征 信
息 ,传 送 至 STM32微 处 理 器 ,经 算 法 处 理 ,判 断 当前 的 手语 信 息 ,并 通 过 语 音 合 成 模 块 和 OLED显 示屏 对 手 语 信 息 进 行 实 时 的语 音翻 译 和 文 本 显 示 。手 语 信 息 经 蓝 牙 传 输 至 用 户 智 能 手 机 ,APP可 将 其 编 辑 为 短 信 息 。采 用人 性 化 、个性
同时 ,算 法 可对 数据 进 行 优 化 处 理 ,通 过 个 性 化 校 准 ,建 立 具 有 个 人 手 势 特 征 信 息 的手 语 库 ,使 得 该 系 统 适 用 于 不 同 的用 户 ,此外 ,用 户 可 根 据 个 人 使 用 情 况 自定 义 手 势 。 通 过 简 单 的操作 ,该 系统 就能通过 实时翻译 手语 、手势编辑短信息等 途 径 为 用 户 提 供 便 利 。
相关文档
最新文档