摘要
本说明书实施例提供一种视频生成方法、视频生成模型的训练方法以及系统。该视频生成方法被配置为通过训练好的包括显式特征提取网络和扩散网络的视频生成模型进行视频生成,包括:获得展示第一对象的运动过程的参考视频和展示第二对象的形象的参考图像,对参考视频中的第一对象的骨架进行提取得到骨架视频,对参考图像进行特征提取得到图像特征,将该图像特征和该骨架视频输入显式特征提取网络得到显式运动特征,并将该显式运动特征和该参考图像输入扩散网络得到展示第二对象的运动过程的目标视频;其中,在视频生成模型的训练过程中,输入至显式特征提取网络的骨架视频为对样本视频中的样本对象的至少部分骨架进行变化后的骨架视频。
技术关键词
视频生成模型
运动特征
特征提取网络
图像
视频生成方法
样本
对象
交叉注意力机制
线性
处理器
精度
关节点
参数
系统为您推荐了相关专利信息
声学信号识别方法
迁移学习模型
无人机
特征提取网络
样本
声呐
图像识别方法
编码器结构
图像识别系统
图像特征提取
降雨检测方法
多尺度特征融合
语义分割模型
训练集
注意力机制