摘要
本发明属于文生图技术领域,提供了基于令牌合并的免训练文生图语义绑定方法及系统,其技术方案为:对输入的提示文本进行标记化处理并编码得到文本嵌入;对文本嵌入分析,得到文本嵌入的耦合性和语义可加性;基于文本嵌入的耦合性和语义可加性构建得到复合令牌,同时,用不包含属性信息的结束令牌替换原始结束令牌;基于语义绑定损失和熵损失迭代更新复合令牌,基于更新后的复合令牌和替换后的结束令牌得到最终的文本嵌入;基于最终文本嵌入生成对应的图像。本发明方法在现有方法难以处理的涉及多个对象和属性的复杂场景中表现非常出色。
技术关键词
令牌
绑定方法
语义
实体
自动编码器
绑定系统
文本编码器
标记
处理器
图像
计算机设备
分析模块
可读存储介质
存储器
注意力
对象
程序
系统为您推荐了相关专利信息
多模态
知识图谱构建
推荐方法
知识图谱优化
工程现场