202613631090
多模态交互下手势控制智能音响的设计与实现
创新训练项目
一般项目
大连东软信息学院
工学
电子信息类
2026-07-15
姓名 年级 学号 所在院系 专业 联系电话 E-mail 是否主持人
徐曼舒 * 24003140420 * * * * 第一主持人
弋骁远 * 23003140330 * * * *
于世弘 * 23003140320 * * * *
张楠楠 * 23003140223 * * * *
邱腾 * 23003140103 * * * *
姓名 单位 专业技术职务 指导教师类型
李婉然 副教授 第一指导教师
负责人曾经参与科研的情况:
指导教师承担科研课题情况:
指导教师对本项目的支持情况:
项目简介: 本项目设计并实现了一款基于手势识别的智能音响系统,旨在解决传统智能音响仅依赖语音交互在嘈杂环境中易受干扰、安静场合不便发声等问题。项目引入手势识别技术作为补充交互方式,实现多模态人机交互,提升智能音响的便捷性与场景适应能力。 系统以STM32F103C8T6为主控芯片,集成手势识别模块(支持上、下、左、右、前、后6种手势)、语音识别模块及红外遥控模块,提供三种互补控制方式。通过蓝牙模块实现无线音频传输,借助WiFi模块获取网络时间与天气信息,利用温湿度传感器监测环境数据,并通过0.96寸OLED屏进行显示。此外,系统采用点阵模块实现音乐频谱的动态显示,增强视觉反馈效果。 系统具有以下特点:一是非接触式隔空手势操作,响应灵敏,环境光免疫力达100K LUX以下,抗干扰能力强;二是支持手势、语音、红外遥控三种控制方式自由切换,适用于嘈杂、安静、远距离等多种使用场景;三是集音乐播放、环境监测、信息显示、音频可视化等功能于一体;四是采用低功耗模块化设计,便于后期维护与功能扩展。 本设计拓展了智能音响在智能家居中的应用,提升交互便捷性与自然度,为智能家居人机交互提供了创新解决方案。