基于多模态信息融合的安全生产作业人员行为识别方法及系统

本发明公开了基于多模态信息融合的安全生产作业人员行为识别方法及系统，该方法首先对作业人员整个作业过程进行视频录制，并将所录制视频保存。其次对视频中的人员进行人体骨架识别，并在视频中描绘出人员的人体骨架图像，再将含人体骨架的视频以及识别出的人体骨架坐标数据保存。最后使用生产作业行为识别模型对骨架视频进行识别检测，再对识别出的作业行为名称、识别行为对应置信度数据进行分析、保存。该系统包括视频采集模块、人体骨架识别模块和作业行为测评模块。本发明作业人员的行为进行识别与评定，节省了大量人力资源，在识别效率上将有巨大提升。