可识别手语的语音显示背心
来源: 发布时间:2023-12-03
浏览次数:1299
基本信息
第一作者姓名:姚骏辰
性别:男
民族:汉族
第一作者学校:深圳市宝安区弘雅小学
第一作者人所在年级:三年级
第二作者姓名:
性别:
民族:
第二作者人所在学校:
第二作者人所在年级:
第三作者姓名:
性别:
民族:
第三作者人所在学校:
第三作者人所在年级:
辅导教师姓名:吴魁
作品摘要
*主要特征:
一款可穿戴的手语识别显示背心,将识别,显示,语音播放、穿戴集于一体。
领口处一个智能摄像头
肩膀处一个MP3播放模块以及扬声器
胸前柔性屏
充电宝置于后口袋
前方口袋放主控板
左胸口语音转文字小屏幕
*主要用途:
为了能够让聋哑人与正常人无障碍沟通,需要一个可以识别手语的机
器,能便捷地与普通人对话:
1.双向沟通,手语转化成文字,语音转文字;
2.双向显示文字
3.方便日常穿戴
4.可扩充手语语库,自定义手势
*与人工智能的相关性说明:
1.识别范围广,常用语句可轻松覆盖
2.识别速度快
3.屏幕较大,显示障碍小
4.方便穿戴
5.柔性屏幕,紧贴织物,更加轻薄;
6.容量更大的主控,从而识别更多手势
7.语音播放对应手语
8.双向沟通
作品说明
*构思形成:
我在新闻上看到聋哑人与正常人没有办法正常的沟通,甚至有时候会受到大众的歧视,也有可能会被带入一些欺诈的陷阱。所以能够让聋哑人与正常人无障碍的沟通,发明这款可识别手语,语音播放,识别语音易于穿戴的背心
*设计过程:
1.设计、拼装第一代木板结构
2.Arduino连接第一代
3.第一代可手语识别和显示文字,点阵屏比较笨重
4.第二代,更换更轻的柔性点阵屏,并选用网布背心,四季均可穿戴。
5.第三代,连接线路,加装音响,增加了语音提示。
6.使用Scratch音频功能录音,只能录14个语音
7.使用更大容量主控Arduino mega
8.第四代新增手势和对应语音95个
9.增加语音转文字功能
10.学习手语
*演示效果:
成人可穿背心,孩子穿戴显大
续航约一小时左右
可识别大部分常用手语识别,准确率在50~60%
识别时间约0.5秒左右。
可同时播放手语对应的声音
充电宝可同时给语音播放器、智能摄像头、主控、屏幕供电
夏天时穿背心不会特别热,冬天可以套在外套外层
内置110条语音和110条手语语库,屏幕最多同时显示8个字
*优点:
识别范围广,常用语句可覆盖
识别速度快
屏幕较大,显示障碍小
方便穿戴和脱下,不造成过多的困扰
结合柔性屏幕,紧贴织物,更轻
容量更大的主控,识别更多手势
语音模块同时将手语说出来
可语音转换文字
*还需进一步研究的问题:
1.能够识别动态手势,从而完成更多语境下的意义;
2.能够更轻量化,实现与现有衣物的结合
3.电源系统集成在一起。
4.增加国内不同方言手语手势,以及国外手语手势。
作品图片