一种针对文本到视频生成的检索增强提示词优化方法

本发明提供一种针对文本到视频生成的检索增强提示词优化方法，包括：通过预训练的句子转换模型提取输入的简略提示的特征；对所述简略提示的特征和关系图进行余弦相似度计算，根据计算结果从所述关系图中检索出与所述简略提示最相关的修饰词集合；采用双分支优化策略对所述简略提示和修饰词集合进行处理，得到候选提示；通过微调的判别模型对上述两个分支生成的候选提示进行比较与选择，得到最优提示。本发明的方法解决了简略提示信息不足的问题，优化后的提示使生成的视频在内容丰富性、画面细节以及动作连贯性上均能得到显著提升。