摘要
本发明公开了一种基于时空特征的UGC视频质量评价方法及系统,该方法包括以下步骤:获取待评价的UGC视频,进行视频分块;对每个视频块进行时空特征提取,得到相应的时间特征和空间特征;采用注意力机制对所述时间特征和空间特征进行加权融合及线性拼接,得到每个视频块的时空交叉融合特征;采用技术回归分支、美学回归分支和语义回归分支对所述时空交叉融合特征进行回归处理,得到三个分支对应的质量分数;对所有视频块的三个质量分数进行加权求和处理,得到所述UGC视频的评价分数。本发明基于空间和时间维度进行视频特征提取及特征交叉融合;又引入三个不同的质量回归分支,从技术、美学和语义不同的方面回归UGC视频质量分数,评价视频质量。
技术关键词
融合特征
评价方法
分支
视频块
美学
语义
空间特征提取
注意力机制
文本编码器
Softmax函数
视频特征提取
分块
线性
多尺度特征
特征提取模块
多层感知机
评价系统
输出模块
系统为您推荐了相关专利信息
图像语义解析方法
生成多尺度
面向智能交通
融合特征
编码特征
邻域特征
异常检测方法
卷积特征
拓扑图
长短期记忆神经网络