基于参考视频的视频生成方法、装置、计算设备及介质

AITNT
正文
推荐专利
基于参考视频的视频生成方法、装置、计算设备及介质
申请号:CN202411831069
申请日期:2024-12-12
公开号:CN119697433B
公开日期:2025-08-08
类型:发明专利
摘要
本申请实施例公开了一种基于参考视频的视频生成方法、装置、计算设备及介质,其中,该方法包括:将参考视频分割为多个参考视频片段,并确定多个参考视频片段的情感类型;获取驱动数据,将驱动数据处理成多个驱动语音片段,并确定多个驱动语音片段的情感类型;依据时长、情感类型以及是否为静音片段,从多个参考视频片段中为每个驱动语音片段确定对应的目标参考视频片段;利用多个驱动语音片段对其对应的目标参考视频片段进行驱动和口型修正,并连接形成目标视频。本申请能够依据短时长的参考视频生成任意时长且虚拟主播动作连贯的目标视频,有效地提高了基于参考视频的虚拟主播语音驱动视频生成的逼真度和动作连贯性。
技术关键词
视频生成方法 语音 表情识别方法 情感分析模型 锚点 变量 文本 视频生成装置 数据 通信接口 通道 处理器 计算机存储介质 音频 指令 视觉 计算机程序产品 存储器 模块
系统为您推荐了相关专利信息
1
基于大语言模型的上下文偏好学习方法、装置及设备
强化学习代理 大语言模型 学习方法 评分机制 指标
2
一种药品查询方法、点读设备和存储介质
查询方法 点读设备 语音 实体 音频输出组件
3
一种铺排船六锚定位方法
姿态偏差 船体 定位方法 数据 方程
4
一种基于人工智能的语音交互方法、介质及显示终端
交互模型 语音交互方法 指令 韵律特征 语音特征
5
具有对讲功能的门锁装置及包括该门锁装置的门
对讲模块 门锁装置 对讲功能 语音播放模块 麦克风模块
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号