摘要
本申请提供一种商品处理模型的训练方法、应用方法和训练装置。该商品处理模型的训练方法包括:获取第一样本图像,第一样本图像具有第一样本图像信息和第一样本文本描述信息,且第一样本图像具有多个子区域,多个子区域一一对应于多个商品子图片,第一商品子图片具有第一商品图像信息和第一商品文本描述信息;调用预训练的多模态大语言模型,对第一样本图像的第一样本图像信息、第一样本文本描述信息进行处理,得到第一样本图像的第一样本图像特征向量、第一样本文本特征向量,得到第一商品子图片的第一商品图像特征向量和第一商品文本特征向量;基于总损失函数,对预训练的多模态大语言模型进行训练,得到多模态大语言模型。
技术关键词
图像特征向量
文本特征向量
样本
大语言模型
图片
训练装置
货架
指令
多模态
模块
数据
场景
电子设备
存储器
可读存储介质
坐标
计算机
处理器
系统为您推荐了相关专利信息
识别验证码
图像生成模型
噪声预测
样本
噪声方差
重识别方法
三元组损失函数
局部细节特征
位置编码信息
模块