可识别手语的语音显示背心

来源: 发布时间:2023-12-03 浏览次数:723
基本信息

第一作者姓名:姚骏辰

性别:男

民族:汉族

第一作者学校:深圳市宝安区弘雅小学

第一作者人所在年级:三年级

第二作者姓名:

性别:

民族:

第二作者人所在学校:

第二作者人所在年级:

第三作者姓名:

性别:

民族:

第三作者人所在学校:

第三作者人所在年级:

辅导教师姓名:吴魁


作品摘要

*主要特征:

一款可穿戴的手语识别显示背心,将识别,显示,语音播放、穿戴集于一体。

领口处一个智能摄像头

肩膀处一个MP3播放模块以及扬声器

胸前柔性屏

充电宝置于后口袋

前方口袋放主控板

左胸口语音转文字小屏幕

*主要用途:

为了能够让聋哑人与正常人无障碍沟通,需要一个可以识别手语的机

器,能便捷地与普通人对话:

1.双向沟通,手语转化成文字,语音转文字;

2.双向显示文字

3.方便日常穿戴

4.可扩充手语语库,自定义手势

*与人工智能的相关性说明:

1.识别范围广,常用语句可轻松覆盖

2.识别速度快

3.屏幕较大,显示障碍小

4.方便穿戴

5.柔性屏幕,紧贴织物,更加轻薄;

6.容量更大的主控,从而识别更多手势

7.语音播放对应手语

8.双向沟通


作品说明

*构思形成:

我在新闻上看到聋哑人与正常人没有办法正常的沟通,甚至有时候会受到大众的歧视,也有可能会被带入一些欺诈的陷阱。所以能够让聋哑人与正常人无障碍的沟通,发明这款可识别手语,语音播放,识别语音易于穿戴的背心

*设计过程:

1.设计、拼装第一代木板结构

2.Arduino连接第一代

3.第一代可手语识别和显示文字,点阵屏比较笨重

4.第二代,更换更轻的柔性点阵屏,并选用网布背心,四季均可穿戴。

5.第三代,连接线路,加装音响,增加了语音提示。

6.使用Scratch音频功能录音,只能录14个语音

7.使用更大容量主控Arduino mega

8.第四代新增手势和对应语音95个

9.增加语音转文字功能

10.学习手语

*演示效果:

成人可穿背心,孩子穿戴显大

续航约一小时左右

可识别大部分常用手语识别,准确率在50~60%

识别时间约0.5秒左右。

可同时播放手语对应的声音

充电宝可同时给语音播放器、智能摄像头、主控、屏幕供电

夏天时穿背心不会特别热,冬天可以套在外套外层

内置110条语音和110条手语语库,屏幕最多同时显示8个字

*优点:

识别范围广,常用语句可覆盖

识别速度快

屏幕较大,显示障碍小

方便穿戴和脱下,不造成过多的困扰

结合柔性屏幕,紧贴织物,更轻

容量更大的主控,识别更多手势

语音模块同时将手语说出来

可语音转换文字

*还需进一步研究的问题:

1.能够识别动态手势,从而完成更多语境下的意义;

2.能够更轻量化,实现与现有衣物的结合

3.电源系统集成在一起。

4.增加国内不同方言手语手势,以及国外手语手势。


作品图片