摘要
本申请实施例提供一种数据处理方法、系统、装置、计算机程序产品及存储介质。在本申请实施例中,设计了一种检索增强装置,可连接至任一多模态大模型,以为多模态大模型附加检索增强生成功能,而且,不再将检索结果直接输入至多模态大模型,而是通过检索增强装置对检索结果进行多模态特征提取及去噪处理后,将融合出的特征表示提供至多模态大模型,这样,外接的检索增强装置中可快速注入不同行业知识的上下文理解能力,从而可更好地去除检索噪声,因此,不再需要依赖多模态大模型自身的上下文理解能力,即可避免检索噪声对输入结果的干扰,进而可在检索增强生成过程中有效改善多模态大模型的输入效果。
技术关键词
多模态特征
数据处理方法
融合特征
计算机程序产品
特征提取模块
冗余特征
编码特征
注意力机制
网络
数据处理系统
存储计算机程序
处理器
可读存储介质
索引
文本
系统为您推荐了相关专利信息
个性化教学
接口适配器
差分隐私保护
教学场景
图谱
数据处理方法
载体
数据关联信息
数据分析模型
数据交互方式
神经网络训练方法
数据处理方法
噪声信息
神经网络训练装置
节点
图像特征向量
机器学习模型
存储模块
标识符
数据缓存方法