摘要
一种特征处理方法、装置、可读介质、电子设备及程序产品,方法包括:根据多模态模型的输入内容,确定除文本模态外的目标模态内容;对目标模态内容进行分割,得到目标子内容;确定目标模态内容的第一嵌入特征和目标子内容的第二嵌入特征;并基于不同的裁剪比例对第一嵌入特征和第二嵌入特征进行裁剪,得到用于多模态模型进行推理的特征。由于可以基于不同的裁剪比例对第一嵌入特征和第二嵌入特征进行裁剪,由此既可以保留目标模态内容中的全局特征,又可以兼顾目标子内容中的局部特征,还可以减少用于多模态模型进行推理的特征数量,从而使得多模态模型在基于裁剪后的特征进行推理时,可以提升多模态模型的推理精度和推理效率。
技术关键词
嵌入特征
多模态
序列
存储装置
电子设备
计算机程序产品
特征值
文本
介质
模块
音频
处理器
视频
图像
精度