一种冲突缓解跨模态搜索方法

AITNT
正文
推荐专利
一种冲突缓解跨模态搜索方法
申请号:CN202411956549
申请日期:2024-12-29
公开号:CN119884434A
公开日期:2025-04-25
类型:发明专利
摘要
一种冲突缓解跨模态搜索方法,包括:特征提取:为每种模态及其对应的哈希标签构建特征表示;模态解耦:分离模态特征以形成通用和特有的哈希编码;标签优化:利用通用哈希编码细化标签信息;语义映射:利用优化后的标签哈希码实现模态间的语义对齐。本发明通过自动特征提取和模态解耦机制,能够将图像和文本转换为深层特征表示,并分离模态特征为公共和特有的哈希编码,减少模态间的不一致性,从而提高检索的准确性;其中模态解耦部分采用负样本对比学习的方法,通过增强模态唯一哈希码之间的排斥性,确保了模态公共哈希码的语义清晰度。这种对比学习策略有助于提高模态间信息的区分度,使得模型能够更准确地识别和区分不同模态数据的独特特征。
技术关键词
搜索方法 模态特征 非易失性存储介质 跨模态 文本 可执行程序代码 图像 多标签 语义 三元组损失函数 自动特征提取 样本 度函数 解耦机制 编码器 通信接口 终端设备
系统为您推荐了相关专利信息
1
SQL注入攻击检测方法、系统及相关设备
攻击检测方法 Java反序列化 样本 分析单元 学习方法
2
在线人机交互方法、系统、装置、电子设备、存储介质及程序产品
音视频交互 视频流 文本 语音 生成提示词
3
脊柱疾病诊断用多模态大语言模型的评测方法及系统
大语言模型 评测方法 基准 多模态 定位问题
4
一种基于多路融合召回检索算法的大语言模型知识库问答系统
知识库问答 检索算法 关键词 动态权重分配 构建知识图谱
5
一种基于无监督学习的智能运维告警生成方法
告警生成方法 无监督学习 神经网络模型 运维 节点
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号