摘要
本说明书实施例提供一种视频生成方法、视频生成模型的训练方法以及系统。该视频生成方法被配置为通过训练好的包括显式特征提取网络和扩散网络的视频生成模型进行视频生成,包括:获得展示第一对象的运动过程的参考视频和展示第二对象的形象的参考图像,对参考视频中的第一对象的骨架进行提取得到骨架视频,对参考图像进行特征提取得到图像特征,将该图像特征和该骨架视频输入显式特征提取网络得到显式运动特征,并将该显式运动特征和该参考图像输入扩散网络得到展示第二对象的运动过程的目标视频;其中,在视频生成模型的训练过程中,输入至显式特征提取网络的骨架视频为对样本视频中的样本对象的至少部分骨架进行变化后的骨架视频。
技术关键词
视频生成模型
运动特征
特征提取网络
图像
视频生成方法
样本
对象
交叉注意力机制
线性
处理器
精度
关节点
参数
系统为您推荐了相关专利信息
空间分布识别方法
区域卷积神经网络
水体
颜色
薄膜状
动态计数方法
多视角视觉
Retinex算法
生物特征识别
卡尔曼滤波算法
关键点定位方法
卡尔曼滤波算法
置信度阈值
标签
热力图
性能评价方法
可见光图像
矿用防爆设备
热像仪
Sobel边缘检测算法
人工智能辅助
图像处理系统
参数
内窥镜图像流
立体成像