一种融合多模态感知的协同监测与人机交互系统及方法

本发明公开一种融合多模态感知的协同监测与人机交互系统及方法，涉及行为监控技术领域，系统包括：可穿戴设备，用于收集环境的多模态传感器数据；还用于接收指令动态调整多种传感器的工作模式；扫地机器人，用于通过人体行为网络模型分析可穿戴设备收集的实时数据并识别用户的人体行为，决定传感器工作模式，并向可穿戴设备发送执行命令；人体行为网络模型，用于从历史数据中学习顺序约束、行为发生的时间规律和持续时间信息，并整合分析实时收集的多模态传感器数据，准确识别用户的实时人体行为；人机交互模块，提供人机交互界面，供家庭成员登录，并实时展示用户的人体行为信息。本发明可以实现人体行为识别和监测。