摘要
本发明涉及一种基于多模态感知的智慧电扶梯乘客行为检测系统及方法。基于多模态感知的智慧电扶梯乘客行为检测系统包括:多模态感知模块,包括多种模态感知器件,用于感知和采集电扶梯上可能会发生的状态或状态变化数据;边缘计算终端,用于接收多模态感知模块采集的数据,并进行计算,用于计算和判断乘客行为;云服务器,接收边缘计算终端计算结果,聚合多终端数据更新模型参数;电扶梯系统,控制电扶梯运行并接收边缘计算终端给出的判断乘客行为信息,做出相应减小风险的处理,实现联动。依据本发明的基于多模态感知的智慧电扶梯乘客行为检测系统能检测和识别出乘客的正常行为和危险行为、并对实施危险行为的乘客进行提醒或采取降低危害的措施。
技术关键词
电扶梯
多模态
压电薄膜传感器
DBSCAN聚类算法
多传感器数据融合
红外热成像仪
广角摄像头
点云去噪
扩展卡尔曼滤波
动态权重分配
云服务器
雷达
热力图
传感器健康状态
多终端
数据更新
风险
人体关键点检测
系统为您推荐了相关专利信息
细粒度图像分类
样本
多模态
图像编码器
文本编码器
分类系统
路面识别方法
车辆动力学模型
前端数据采集模块
卷积神经网络框架
视频生成模型
多模态特征
深度特征信息
噪声预测
融合特征
数据处理方法
多模态
数据处理装置
非临时性计算机可读存储介质
执行器