摘要
本申请属于视频生成技术领域,公开了一种基于关键帧的动画视频生成方法、装置、设备及存储介质,方法包括步骤:对视频帧序列进行关键帧检测,获取关键帧数据,并根据关键帧数据生成中间帧数据;获取目标的第一位置特征及目标的第二位置特征;利用关键帧数据的第一文本特征、第一图像特征、第一位置特征及中间帧数据的第二文本特征、第二图像特征、第二位置特征对自回归任务模型进行训练学习,得到目标自回归任务模型;将关键帧输入目标自回归任务模型进行动画视频生成。通过对视频数据的关键帧进行检测,生成训练数据集,通过对自回归任务模型进行训练学习,从而可以根据前缀特征描述,进行动画视频生成,实现了通过关键帧来生成需要的动画视频。
技术关键词
动画视频生成方法
关键帧
视频帧
计算机可读指令
文本
序列
分词
抑制算法
视频生成技术
视频生成装置
相邻两帧图像
生成训练数据
图像分割
图像块
可读存储介质
特征提取模块
系统为您推荐了相关专利信息
情感反馈方法
多模态交互
数据
计算机可执行指令
反馈策略
神经网络模型
多维评价指标
数据
轻量级神经网络
文本分类模型