一种基于互联网的多种手语多国语言智能互译系统

来源: 发布时间:2019-09-18 浏览次数:5086

基本信息


第一作者姓名:李天琦

性别:男

民族:汉族

第一作者学校:安徽省阜阳师范学院第二附属中学

第一作者人所在年级:初一

第一作者人所在年级:薛天浩

性别:男

民族:汉族

第二作者人所在学校:安徽省阜阳师院学院第二附中

第二作者人所在年级:初一

辅导教师姓名:王正



作品摘要


*结构组成:

1、弯度传感器部分及线路;2、处理器、存储器 部分;3、信号灯、喇叭、蓝牙信息输出部分;5、手套、USB辅助架构部分;6、计算机网络多种语言翻译软件部分

*主要特征:

使用Flex弯曲传感器上一种可变电阻,当传感器受力弯曲,会改变传感表面导电粒子的分布,从而改变电阻值的大小。弯曲程度越大、传感器的阻值就越大,反之,越小。编程原理:根据聋哑人不同含义的手语的手形的不同,使用Arduino来采集传感器弯曲时改变的电阻值,并为其添加分压装置来分压传感上的电压,从而判定手形,转化为相应的某国语言,并把相应的文字显示在电脑、手机投影等屏幕上,实现手语翻译成语言、语音。

*主要用途:

本作品是一种基于互联网的多种手语多国语言智能互译系统。目的是为了让不同国家的聋哑人都可以实现信息的无障碍交流沟通,让不同国家的正常人与不同国家的聋哑人实现语言信息的无障碍沟通。

*创新点:

创新之处:1、使用弯曲传感器采集手形信息并转化为电信号信息;2、利用互联网的各国语言、文字互译系统把手语采集过来的信息转化不文字的信息再转化为所需要的各种语言和文字。


作品说明



*问题提出:

*提出的问题和解决的问题:

提出问题:聋哑人,他们无法像正常人那样沟通,这样造成了他们工作、学习、娱乐、就医、维权等生活状态的混乱,许多文化较低的聋哑人甚至面临生存的危机。

解决问题:让聋哑人通过可穿戴设备实现与正常人之间的交流

研究问题的原因和意义:

全中国大约有2075万人,全世界大致在6500-7000万人为聋哑人,让聋哑人通过可穿戴设备实现与正常人之间的交流,主他们工作、学习、娱乐、就医、维权等方面正常生活。

*解决方案:

解决问题的办法:

本系统通过采集弯度传感器来测量手势的手形所产生的电压,输入处理器,根据事先开发的程序及某个国家(如中国、英国等不同国家)手语语法,从而来判定手语的含义,把它翻译成文字或语音表达出来,让正常人知道聋哑人表达的意思。

发明研究的重点:

1、采集弯度传感器的不同手指的电压;2、手语语法与弯度传感器的电压信息之间的对应关系 。

发明研究的难点:

1、手语语法与弯度传感器的信息之间的对应关系 ,以及动态手语的表达的信号的采集与处理。

发明研究的难点:

1、手语语法与弯度传感器的信息之间的对应关系 ,以及动态手语的表达的信号的采集与处理。

本发明使用方法、附图说明性文字:

1、戴上具有弯度传感器及信息处理器手套,通过正常的手语手势使用即可。

2、本系统也可以联入互联网系统,实现本系统对互联网翻译软件的信息输入,实现多国语言的互译功能。

3、本系统也可以单独usb供电,单独使用。

*使用或试用效果:

已实现部分手语的翻译及多国语言的互译转化。

*优点:

1、本作品实现手语翻译成自然语言,设备成本低、使用简便,具有很强的实用性。

2、如果接入互联网,可以利我们自己开了的同屏软件互译系统,把接收到的哑语的信息,通过软件互译系统翻译成多国语言,实现一个国家的聋哑人可以与不同国家的聋哑人或正常人交流。

3、只要把不同国家的手语语法和语言做成数据库输入到本系统中,不同的国家的聋哑人都可以使用。就象计算机安装上不同国家语言版本的操作系统,不同国家的人都可以用

*还需进一步研究的问题:

由于自己的能力水平、时间经费等方面原因,对于一些运动变化的手势需要进一步研究。如果 利用手机的照相功能或特殊相机,实现图象识别的话,或者正常人说话,能过手机实现虚拟手语,让正常人与聋哑人完全实现无障碍沟通,可能是我我以后的研究方向。现在由于知识、技术有限,只能做到这个程度。



作品图片


查新说明


*查新网址与关键词:

手语翻译and互联网and互译

手语翻译and互联网互译and多国语言

多种手语翻译and互联网互译

*与本发明最相近的发明专利、研究文献的名称与摘要:

基于移动互联网的手语翻译器的设计与实现

来自 知网

 喜欢

阅读量:34

作者:金力

摘要:根据第六次全国人口普查我国总人口数和第二次全国残疾人抽样调查我国残疾人数占全国总人口数的比例和各类残疾人数占残疾人总人数的比例,可以预测2017年聋人总人数将会超过2700万人。众所周知,与其他类残疾人相比较,和聋人沟通更加困难。为了解决聋人与正常人的沟通困境,本文提出了一套自然手语资源建设、服务平台开发和手机终端APP实现的综合方案。本系统主要做了以下几方面的工作:1.电子化手语资源:首先收集日常对话300句,设计了这300句日常对话相关的语义资源(自然语言和自然手语之间翻译所需的语义知识);编写爬虫程序,从我爱手语网中爬取了手语图片资源,通过整理,建立了手语图片库;建立了3个手语角色模型,手Key了30手语动作,建立手语动画库;收集手语视频,建立手语视频库。2.开发了资源管理系统。该模块主要是对文法知识库和对手语资源库的管理,本系统将文法知识库分类为日常对话库、语素数据库、词语库、短语库、同义词辞典、术语语义网、自然手语文法和自然语言文法库。在开发过程中,使用了大规模知识管理技术,设立一套通用化的知识管理建模方案。该套方案是一般知识管理系统工具中所没有的,是一种细粒度的管理,这种细粒度的知识管理,使得平台分析管理员可以更有效的从知识的运行中实时地掌握用户的使用情况,从而更有效地进行科学决策。3.搭建了自然手语资源服务平台,为接入平台的应用系统提供手语资源服务,包括自然语言处理和手语动画生成功能。在自然语言处理技术方面,本系统主要采用概念空间+语义文法+意图分析+知识融合的技术路线,综合起来完成语义分析。在动画自动生成技术方面,主要采用关键帧动画技术,运动路径动画技术,变形动画技术,逐帧动画等,自主设计了一种可支撑不同角色的手语骨骼动画自动生成+专家调优结合的模式。

这款创

*自我查新结论:

新颖