摘要
本发明公开了一种基于AI技术的多模态融媒体内容辅助创作方法,其根据用户输入的创作需求文本提取关键特征,并根据关键特征采用知识图谱检索方式在知识库中检索得到创作素材并生成初稿,对初稿采用多模态对齐模型进行跨模态特征映射,并且通过对比学习对齐文本‑图像‑视频的嵌入向量,利用注意力机制动态调整多模态内容的相关性后得到多模态内容包;对多模态内容包进行多种方式查重,并将经过查重后的多模态内容包发送给用户进行人工编辑。本发明通过AI辅助写作、AI配图、视频生成等多模态处理方法以及全网查重和传播价值评估,提升内容生产效率和质量,优化传播效果,并保护原创内容。
技术关键词
创作方法
文本
关键帧
图像全局特征
多模态
视频
图像特征编码
跨模态
条件式生成对抗网络
高维特征向量
指纹
媒体
注意力机制
生成上下文感知
倒排索引方式
动态时间规整算法
镜头边界检测
语义
局部敏感哈希
预训练语言模型