一种基于软提示的智能图文检索系统、方法及电子设备

本发明公开了一种基于软提示的智能图文检索系统、方法及电子设备，其中系统包括：检索界面模块、模型检索模块、检索数据收集模块、软提示高效更新模型模块；其中软提示高效更新模型模块，用于在收集的图文对数据集达到预设阈值，利用存储的数据在多模态预训练模型上进行训练，获得新的软提示，并用其更新模型检索模块。本发明利用适用于大规模预训练模型的软提示方法，考虑了多模态建模的特点，将软提示方法与多模态方法结合，来实现向量在图文检索任务上的最佳对齐；构建模态共享的软提示和模态特定的软提示，来促进不同模态软提示信息的对齐，进而促进不同模态信息的对齐。本发明可广泛应用于图文检索技术领域。