摘要
本申请公开了一种基于新媒体内容创作模型的短视频自动生成方法及装置,服务端方法包括:接收客户端发送的短视频生成请求,短视频生成请求携带视频制作描述文本和用户标识;将视频制作描述文本输入预先微调的大语言模型中,输出视频制作方案信息;通过用户标识,从BI系统中搜索用户上传的临时视频素材与系统素材;在临时视频素材不为空的情况下,将视频制作方案信息、临时视频素材以及系统素材输入视频生成模型中;或者,在临时视频素材为空的情况下,将视频制作方案信息、系统素材输入视频生成模型中;输出目标短视频,发送目标短视频至客户端。因此,采用本申请实施例,可使生成的短视频表现出丰富的层次感和情感张力,从而提升了短视频的质量。
技术关键词
语义向量
短视频
视频生成模型
视频自动生成方法
场景
特征提取模块
拼接模块
文本
匹配模块
NLP技术
生成算法
媒体
参数
客户端
训练集
基础
字幕
音频特征