基于表情和姿态特征融合的新生儿疼痛分类识别方法及系统

本发明提供一种基于表情和姿态特征融合的新生儿疼痛分类识别方法及系统，该方法通过获取新生儿疼痛数据集，新生儿疼痛数据集包括新生儿视频与对应的疼痛标签；构建基于表情和姿态特征融合的新生儿疼痛分类模型，基于表情和姿态特征融合的新生儿疼痛分类模型包括数据处理模块、多模态特征提取模块、自注意力机制模块、特征融合模块和分类层，数据处理模块对输入的新生儿视频进行表情数据处理和姿态数据处理分别得到新生儿表情图像序列和新生儿姿态图像序列；得到训练后的新生儿疼痛分类模型；进行疼痛分类识别；本发明能够给模型提供更丰富的信息，能够增强不同模态特征之间的相关性和互补性，能够有效提升新生儿疼痛分类的准确率和鲁棒性。