多模态模型的高效知识蒸馏方法与微模型生成方法及系统

本发明属于计算机视觉领域与量化模型技术领域，具体涉及一种多模态模型的高效知识蒸馏方法与微模型生成方法及系统，包括：对原始图像数据进行标准化、编码、和融合处理得到特征图，输出小模型编码器下的深度特征；对不同类型的提示信息进行编码、拼接和再编码处理，得到提示特征；采用知识蒸馏优化后的小模型对提示特征进行候选区域预测，并对预测结果中的不准确区域动态采样生成新的提示特征，且与原有的提示特征结合，输出更新后的掩码解码器和提示特征组合；利用轻量级区域建议网络生成区域建议，并融合区域建议与提示特征，得到辅助信息；结合深度特征、提示特征组合、区域建议和辅助信息，进行掩码预测，生成目标对象所在区域的二值掩码。