摘要
本发明涉及一种图像语义增强与对称语义补全的搜索系统和方法,通过设置的图像语义增强装置以使用超像素分割算法划分图像区域,使区域内的低级语义信息更加一致,结合超像素分割算法处理前进行的图像数据增强,能够确保从全局图像中调取到的高级语义传递到局部图像块中。并且,通过设置的对称语义补全装置能够进行局部‑局部跨模态对齐和全局‑局部跨模态对齐,进而实现图像和文本局部和全局这两个方向上的语义补全,实现以跨模态交互恢复全局和局部特征,最终达到输入图像与其说明文字全局对齐的目的,完成语义补全,降低计算成本。
技术关键词
语义
超像素分割算法
搜索系统
补全装置
像素块
图像
网络单元
跨模态
序列
交叉注意力机制
模块通信
文本编码器
代表
编码算法
搜索方法
系统为您推荐了相关专利信息
网络流量日志
网络安全监控方法
状态监测数据
节点
文件特征
覆盖率信息
状态检测方法
密度
生长状态检测系统
电子终端