基于树莓派的语音识别及心理情感分析装置

来源: 发布时间:2022-11-07 浏览次数:1042
基本信息

第一作者姓名:叶文浩

性别:男

民族:汉族

第一作者学校:东莞市松山湖实验中学

第一作者人所在年级:初三

第一作者人所在年级:汤子俊

性别:男

民族:汉族

第二作者人所在学校:东莞市松山湖实验中学

第二作者人所在年级:初二

辅导教师姓名:黄权根


作品摘要

*主要特征:

一种支持长时间语音识别和长篇语音文本情感倾向分析的,能够持续存储用户数据并跟踪用户情绪走向全过程的,带有预警功能的装置。

*主要用途:

装置主要用于校园学生心理情况普查、家庭孩子的倾诉对象,能够辅助心理老师测试学生心理健康。

*与人工智能的相关性说明:

算法:采用人工智能算法,将技术应用服务于人类

功能:提供心理普查客观评价方式

设计:装置精小可移动,提高心理普查的自由度

应用:能够长期跟踪学生心理变化情况,带有预警功能,能及时发现学生的心理异常


作品说明

*构思形成:

在校园中存在心理教师配额少,心理普查压力大的问题,由此便容易因为沟通不及时,导致心理情绪得不到引导而进一步爆发。通过调查发现,部分学生更愿意选择机器助手倾诉情感,而不是直接面对心理老师

*设计过程:

外观:借助lasermaker设计结构,切割机制作成型

材料:树莓派、RFID、麦克风、显示器

功能设计:借助processon设计功能图与数据流图

技术路线:运用python制作功能,调用麦克风实现语音捕获、结合声波知识进行音频分割、结合API与HNN实现语音识别、结合训练模型与Snownlp进行情感识别、实时筛选异常情况并进行邮件反馈、制作与搜集语料集进行模型训练、回归计算实现长期跟踪与预测

*演示效果:

登录:屏幕呈现软件窗口,借助RFID识别学生卡和管理员卡信息,进入不同的功能界面

学生端:点击录音与停止录音实现录音,录音后软件识别音频文字,点击查看报告,程序结合情感模型分析文字的情感值,通过数据统计分析学生心理是否异常,从而决定是否将情况反馈给心理老师

教师端:结合邮件反馈、录音时间和姓名,准确查询学生的录音、数据和报告,点击长期报告,观察学生的长期心理变化,结合预测功能,教师能更好跟踪学生

*优点:

算法:采用人工智能算法,将技术应用服务于人类

功能:提供心理普查客观评价方式

设计:装置精小可移动,提高心理普查的自由度

应用:能够长期跟踪学生心理变化情况,带有预警功能,能及时发现学生的心理异常

*还需进一步研究的问题:

1、丰富测试数据,使得决策树判断更为准确

2、数据联网、用户联网,实现数据保密


作品图片