摘要
本发明公开了基于跨模态数据融合对齐处理的多模态交互系统,涉及多模态交互技术领域,解决了现有技术中教育场景下跨模态数据融合对齐处理低效的技术问题,本发明具体为硬件架构内硬件配合运行为数据交互平台提供多模态数据;数据交互平台生成跨模态数据融合信号并发送至跨模态数据融合单元,跨模态数据融合单元接收后,进行数据融合;跨模态数据融合模块进行数据融合对齐处理后,产生交互分析控制信号并发送至交互分析控制单元;交互分析控制单元接收后,进行交互分析控制。
技术关键词
跨模态数据
数据交互平台
交互系统
教育场景
多媒体黑板
教师
控制单元
意图指令
课堂场景
语音
课件内容
硬件运行状态
手势
多模态
识别关键字
麦克风阵列