摘要
本发明涉及生理测量技术领域,尤其涉及一种结合多尺度周期注意力与MAE(自监督学习)的远程生理测量方法。步骤如下:S1:基于时空融合模块、原始视频MAE模块和多尺度周期注意力模块构建SRMFormer整体框架;S2:将时空融合模块的输出通过Patch Embedding进行分块嵌入处理,将Token分别输入至原始视频MAE模块,以及结合生理先验的多尺度周期注意力模块中进行处理。本发明提供的一种结合多尺度周期注意力与MAE的远程生理测量方法,通过多尺度周期注意力模块,结合生理先验偏置,使自注意力机制在多个时间尺度上与心跳间隔对齐,并通过原始视频MAE结构,可在无预处理条件下通过周期感知损失重建遮蔽的视频Token,从而去除手工设计的STMap(时空图)流程。
技术关键词
生理测量方法
多尺度
周期
注意力机制
视频
前馈神经网络
表达式
编码器模块
融合策略
矩阵
分块
超参数
解码器
像素
线性