摘要
本说明书实施例提供一种文本生成方法和系统、模型训练方法和系统。其中,在该文本生成方法中,文本生成系统可以获得用于表征文本生成的需求目标提示文本,并将目标提示文本输入已训练好的扩散模型,以通过扩散模型生成目标文本。其中,目标文本包括多个词元。扩散模型被训练为具有基于目标提示文本对带噪文本进行多轮预测以逐步生成目标文本中的各词元的能力。在每轮预测中,扩散模型以并行方式生成目标文本中的部分词元。针对目标文本中的目标词元,扩散模型在生成目标词元时以目标词元的前向文本信息和后向文本信息作为参考,前向文本信息包括位于目标词元之前的文本信息,后向文本信息包括位于目标词元之后的文本信息。
技术关键词
文本生成方法
双向注意力机制
文本生成系统
模型训练方法
样本
数据
模型训练系统
网络架构
处理器
噪声
策略
参数
系统为您推荐了相关专利信息
图像拼接方法
摄像仪
镜头模组
坐标
图像数据技术
版权验证方法
3D点云数据
样本
深度学习模型
水印