一种开放词汇占用预测方法、系统、终端设备及介质

本发明提供一种开放词汇占用预测方法、系统、终端设备及介质，该方法包括获取训练数据；利用训练数据对预先构建的开放词汇占用预测模型进行训练，得到训练好的开放词汇占用预测模型；其中，开放词汇占用预测模型包括基于特征指导获取RGB图像语义特征的编码模块、基于特征蒸馏损失实现RGB图像语义特征和视觉语言特征之间空间对齐的更新模块、用于根据RGB图像语义特征进行开放词汇占用预测的推理模块；将待预测的RGB图像数据输入训练好的开放词汇占用预测模型，得到待预测的RGB图像数据对应的开放词汇占用预测结果。本发明能够提高开放词汇占用预测的准确性。