摘要
本发明公开了一种基于视频显著性排序的视频重定向方法及系统,首先获取至少包含每个实例边界框,掩码结果和显著性排名的视频显著物体排序数据集;构建基于Mask R‑CNN和图神经网络的显著物体排序模型,通过Mask R‑CNN区分图像中的显著物体和非显著物体,通过注意力机制和位置保护注意力(PPA)提取实例特征后,将特征输入图神经网络中,比较每个实例的显著性值并进行排序;计算显著性中心为裁剪中心,根据目标长宽比得到裁剪框的尺寸,最后利用LOESS方法平滑裁剪中心的时间序列,根据平滑后的裁剪中心和裁剪框的尺寸对视频帧进行裁剪得到重定向后的视频。本发明方法能够最大程度上保留显著性区域并保证场景的连续性。
技术关键词
视频重定向方法
排序模型
视频重定向系统
排序损失
轨迹特征
物体检测
注意力机制
视频帧
局部特征提取
长宽比
尺寸
图像
连续性
序列
数据
处理器
坐标
系统为您推荐了相关专利信息
融合特征
序列特征
歌曲推荐方法
排序模型
注意力机制
肝脏占位性病变
文本
动态上下文
多头注意力机制
肝脏超声图像
轨迹特征
指令识别方法
视频流
频率
脉冲耦合神经网络