一种基于混合感知的多模态人机交互系统

本发明公开了一种基于混合感知的多模态人机交互系统，涉及人机交互技术领域；本发明通过多模态数据融合与动态优先级机制，显著提升了交互终端的环境适应性与响应效率；数据采集模块利用摄像头与麦克风同步获取视频流和音频流，结合红外传感器计算用户距离，可在复杂场景中精准识别基础对象，避免误标记；交互分析模块基于距离特征与语音能量构建优先级评分体系，既保证了近场用户的交互优先权，又能通过语音能量捕捉主动交互意图，解决了多用户场景下的交互冲突问题；当目标对象在设定时间二内无语音信号时，系统自动切换至其他发声基础对象，避免交互中断，提升用户体验。