基于树莓派的语音识别及心理情感分析装置
来源: 发布时间:2022-11-07
浏览次数:1460
基本信息
第一作者姓名:叶文浩
性别:男
民族:汉族
第一作者学校:东莞市松山湖实验中学
第一作者人所在年级:初三
第一作者人所在年级:汤子俊
性别:男
民族:汉族
第二作者人所在学校:东莞市松山湖实验中学
第二作者人所在年级:初二
辅导教师姓名:黄权根
作品摘要
*主要特征:
一种支持长时间语音识别和长篇语音文本情感倾向分析的,能够持续存储用户数据并跟踪用户情绪走向全过程的,带有预警功能的装置。
*主要用途:
装置主要用于校园学生心理情况普查、家庭孩子的倾诉对象,能够辅助心理老师测试学生心理健康。
*与人工智能的相关性说明:
算法:采用人工智能算法,将技术应用服务于人类
功能:提供心理普查客观评价方式
设计:装置精小可移动,提高心理普查的自由度
应用:能够长期跟踪学生心理变化情况,带有预警功能,能及时发现学生的心理异常
作品说明
*构思形成:
在校园中存在心理教师配额少,心理普查压力大的问题,由此便容易因为沟通不及时,导致心理情绪得不到引导而进一步爆发。通过调查发现,部分学生更愿意选择机器助手倾诉情感,而不是直接面对心理老师
*设计过程:
外观:借助lasermaker设计结构,切割机制作成型
材料:树莓派、RFID、麦克风、显示器
功能设计:借助processon设计功能图与数据流图
技术路线:运用python制作功能,调用麦克风实现语音捕获、结合声波知识进行音频分割、结合API与HNN实现语音识别、结合训练模型与Snownlp进行情感识别、实时筛选异常情况并进行邮件反馈、制作与搜集语料集进行模型训练、回归计算实现长期跟踪与预测
*演示效果:
登录:屏幕呈现软件窗口,借助RFID识别学生卡和管理员卡信息,进入不同的功能界面
学生端:点击录音与停止录音实现录音,录音后软件识别音频文字,点击查看报告,程序结合情感模型分析文字的情感值,通过数据统计分析学生心理是否异常,从而决定是否将情况反馈给心理老师
教师端:结合邮件反馈、录音时间和姓名,准确查询学生的录音、数据和报告,点击长期报告,观察学生的长期心理变化,结合预测功能,教师能更好跟踪学生
*优点:
算法:采用人工智能算法,将技术应用服务于人类
功能:提供心理普查客观评价方式
设计:装置精小可移动,提高心理普查的自由度
应用:能够长期跟踪学生心理变化情况,带有预警功能,能及时发现学生的心理异常
*还需进一步研究的问题:
1、丰富测试数据,使得决策树判断更为准确
2、数据联网、用户联网,实现数据保密
作品图片