视频生成方法、装置、设备、存储介质及程序产品

AITNT
正文
推荐专利
视频生成方法、装置、设备、存储介质及程序产品
申请号:CN202411087758
申请日期:2024-08-08
公开号:CN119094841A
公开日期:2024-12-06
类型:发明专利
摘要
本公开涉及视频处理技术领域,公开了视频生成方法、装置、设备、存储介质及程序产品,该方法包括:获取目标音频、待处理视频以及目标对象的多张图像,待处理视频是对目标对象的视频中的唇部区域进行掩模处理得到的;基于目标音频生成目标对象的驱动关键点;基于多张图像中唇部区域的牙齿图像质量,对多张图像进行筛选,确定参考图像;对参考图像中的目标对象进行关键点提取,得到参考关键点;基于参考图像、参考关键点以及驱动关键点,对待处理视频中的唇部区域进行预测,确定与目标音频对应的目标视频。本公开能够解决语音驱动唇形的驱动效果较差的问题,以提高语音驱动唇形所生成的说话视频的视频质量。
技术关键词
视频生成方法 关键点 图像 视频生成模型 音频 光流模型 对象 视频生成装置 光流场 像素 掩模 可读存储介质 指令 数据获取模块 计算机程序产品 存储器 处理器
系统为您推荐了相关专利信息
1
一种货物移动机构及码垛机器人
货物移动机构 码垛机器人 引导组件 驱动组件 移动组件
2
一种天体数据检索方法、装置、存储介质及电子设备
索引算法 多模态特征 图像 数据检索方法 坐标
3
基于目标检测的铁路接触网检修车辅助停车测距方法
铁路接触网检修 深度图像数据 测距方法 停车场 物体
4
一种用于无人机视频的AI电子围栏异常行为识别系统
识别系统 现场画面 规划 视频 识别工作
5
基于数字孪生的工业机器人的运行监控方法及系统
机器人模型 工业机器人 数字孪生模型 监控方法 实时位置
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号