摘要
本发明涉及智能可穿戴设备技术领域,公开了一种融合多模态交互方法、设备及存储介质。该方法包括:采集输入信号,对所述触摸数据进行手势识别处理,得到手势轨迹;将手势轨迹与预置手势模型比对,得到手势识别结果;对所述语音数据进行语音识别处理,得到语音识别结果;根据预置的运动特征模型,对运动数据识别操作处理,得到运动识别结果;根据预置云端大模型,对手势识别结果、语音识别结果、运动识别结果融合分析,得到多模态交互的操作识别数据。在本发明实施例中,通过方法得到操作识别数据,设备可以进行多模态交互,使整体互动表现更自然以建立稳定的用户连接感。
技术关键词
多模态交互方法
运动识别
手势
数据
主控模块
运动特征
云端
摄像头模块
触控模块
内容更新
智能可穿戴设备
传感模块
轨迹
语音活动检测
蓝牙通信模块
蓝牙模块
记忆机制
系统为您推荐了相关专利信息
电信号
生成系统
报告
数据处理指令
数据处理模块
海洋机器人
路径规划方法
节点
能源
智能控制模块
CT体数据
特征金字塔
CT影像数据
累积分布函数
直方图匹配算法