基于大模型的目标检测方法、装置和电子设备

本申请提出一种基于大模型的目标检测方法、装置和电子设备，涉及目标检测、焊接技术领域。方法包括：将多模态的对象数据输入至大模型，大模型包括第一编码器；通过第一编码器对第一模态的对象数据进行坐标转换、维度转换中的至少一种处理，得到第一模态的目标转换数据；通过第一编码器对第一模态的目标转换数据与第二模态的对象数据进行融合，得到融合数据；通过大模型中第一编码器以外的其余网络，基于融合数据进行目标检测。由此，可采用多模态数据进行目标检测，提高了目标检测的鲁棒性、泛化性和精度，可利用第一编码器对某模态的对象数据进行坐标转换和/或维度转换，得到该模态的目标转换数据，以实现多模态数据融合。