摘要
本发明公开了一种随机丢帧场景下基于人脸视频分析的远程心率监测方法。该方法使用普通摄像头记录一段人脸图像序列,并把所收集序列传输到服务器,传输过程中模拟信道较差且会发生随机丢帧的情形;在服务器接收端接收到的是不完整人脸图像序列,并且已知不完整人脸图像序列和发生丢帧的帧序号;首先在完备的图像序列训练3DCNN作为教师模型提取由人脸的皮肤色度信息组成的人脸脉搏波信号,采用知识蒸馏的方式在不完整人脸图像序列训练学生模型以恢复鲁棒的人脸脉搏波信号。最后依据学生模型所提取的人脸脉搏波信号计算心率。本发明可以在脉搏波信号在发生丢帧干扰的情况下,可靠地测量人体的心率。
技术关键词
人脸图像序列
脉搏波
远程心率
视频分析
人体心率
监测方法
网络
学生
中间层
信号
峰值频率分量
知识蒸馏方法
场景
色度信息
服务端
掩膜
注意力