摘要
本申请提供一种基于注意力加权的图像语义重建质量评估方法及装置,其中的方法包括:获取包括多帧连续的原始图像的视频帧;对每帧原始图像进行预处理,得到预处理后的每帧原始图像;将预处理后的每帧原始图像输入预先训练完成的T imesFormer模型,得到T imesFormer模型的倒数第二层输出的每帧原始图像的表征类别的注意力图;基于每帧原始图像的表征类别的注意力图,生成每帧原始图像的语义权重图;利用每帧原始图像的语义权重图,确定每帧原始图像的重建图像的质量评估值;基于每帧原始图像的重建图像的质量评估值,确定视频帧的全局质量评估值。本申请提高了重建图像的质量评估值的准确度。
技术关键词
注意力
语义
视频帧
标识符
图像块
像素
可读存储介质
计算机
处理器
评估装置
处理单元
存储器
电子设备
指令
索引