基于毫米波-视觉融合的多目标液体种类快速检测方法

本申请属于液体种类感知与多模态传感技术领域，公开了一种基于毫米波‑视觉融合的多目标液体种类快速检测方法，包括，首先获取多目标的毫米波反射信号和图像数据，并对图像数据进行目标检测和单目标特征提取，同时分离出单目标毫米波原始信号，然后对该原始信号进行分段预处理和快速傅里叶变换后输入两个编码器，分别进行对液体和容器的特征提取，训练时将从图像中提取到的容器特征作为辅助标签，并且在提取的两个毫米波特征之间引入解耦约束项实现解耦；最后根据从毫米波信号中提取的液体特征输出单目标分类结果，对所有单目标分类结果进行统一整合以可视化形式输出。本申请同时识别多个容器中的液体种类，提升识别精度、鲁棒性与检测效率。