摘要
本发明公开了一种低光照场景下基于多模态特征融合的步态识别方法,属于步态识别领域。该方法首先从采集到的视频中获取一个批次的图片生成初始检测集合,将初始检测集合输入到人物检测提取网络中来提取图片中的步态轮廓图并对步态轮廓图进行降噪处理以提高低光照场景下步态轮廓图的清晰度,然后将初始检测集合输入到人物骨架特征提取网络中来生成图片中行人的骨架模型,接着将处理后的步态轮廓图和骨架模型输入到多模态特征融合网络中,将融合网络中的两个逻辑输出进行融合得到最后的行人识别结果。本发明能够在低光照情况下充分利用图片中存在的各种信息,得到较为全面的特征表示,并有效提高步态识别在低光照场景下的准确性、鲁棒性和实用性。
技术关键词
步态轮廓图
行人步态
骨架特征
多模态特征融合
步态识别方法
特征提取网络
人体关节点
光照
骨架模型
特征协方差矩阵
序列
场景
标签
单人
概率分布函数