用于实现移动端目标感知的多模态网络剪枝方法及系统

本发明公开了用于实现移动端目标感知的多模态网络剪枝方法及系统，方法包括：通过评估模块定义多模态信息融合时的融合匹配度量标准；其中，所述融合匹配度量标准用于衡量多模态融合特征与融合前的单模态特征之间的匹配相关性；通过剪枝模块基于所述融合匹配度量标准，对初始化的多模态感知模型中相应模态网络层进行非结构性剪枝；通过控制模块控制所述评估模块和所述剪枝模块在预设迭代次数内对所述模态网络层执行剪枝操作，直至模型收敛。该方法能有效地在多模态感知网络中修剪不重要的权重，并平衡融合前后的特征，最终实现多模态网络在移动端实时且高精度的部署。