基于多模态大模型的波束预测方法、装置、设备及介质

本申请提供一种基于多模态大模型的波束预测方法、装置、设备及介质，利用第一多模态环境‑波束数据集对基于多模态大模型的波束预测模型进行一次微调训练；利用小样本训练集对一次微调训练后的基于多模态大模型的波束预测模型进行二次微调训练；根据二次微调训练后的基于多模态大模型的波束预测模型和目标终端在第一时刻的目标多模态环境数据获得目标终端在第一时刻对应的波束；基于多模态大模型的波束预测模型用于根据目标多模态环境数据得到文本嵌入特征和图像嵌入特征，获得与波束选择相关的多模态特征，将多模态特征映射到波束码本中所有波束的概率分布选取概率最大的波束索引对应的波束；本申请的方案具备较高的预测准确性和较强的泛化能力。