一种基于深度分离的视频防抖系统及方法

本发明公开了一种基于深度分离的视频防抖系统及方法，包括：深度分离模块，用于从视频帧中提取特征点，通过计算其深度信息，将特征点按照深度进行分类，从而分离不同深度层次的特征点；视频处理模块，用于通过深度分离后的特征点计算视频帧间的变换关系来估算相机的运动信息，并对不同深度层次的运动信息进行平滑处理，对视频帧进行重新映射，实现视频的平稳变换与去抖。本发明结合视觉模态和传感器模态，提取视频帧中的特征点，并且高效地进行特征点匹配、特征点的深度计算，将不同深度的特征点按类计算单应性矩阵，来避免单应性矩阵描述相机运动的局限性。