摘要
本公开提供了一种模型训练方法,涉及人工智能技术领域,尤其涉及多模态嵌入、大模型、检索增强生成和知识库等技术领域,可应用于智能问答处理场景下。具体实现方案为:将多个跨模态样本对各自的不同模态的模态样本,分别输入待训练嵌入模型中用于不同模态的多个编码网络,得到多个模态样本嵌入向量,其中,跨模态样本对包括不同模态的两个模态样本;根据多个模态样本嵌入向量,确定至少一个相关性特征;根据至少一个标签特征和至少一个相关性特征,确定至少一个相关性损失信息;根据多个相关性损失信息,训练待训练嵌入模型。本公开还提供了一种问答信息处理方法、装置、电子设备和存储介质。
技术关键词
样本
跨模态
标签特征
问答信息处理方法
文本
音频编码
模型训练方法
图像编码
网络
数据
模型训练装置
信息处理装置
处理器
人工智能技术
计算机程序产品
系统为您推荐了相关专利信息
语义意图
多任务
大语言模型
界面控件树
生成方法
软件缺陷预测算法
软件缺陷预测方法
全局测试数据
异构
卷积神经网络模型
变电站设备
编解码
解码矩阵
编码模块
寿命预测模型