摘要
本发明提供了一种基于CLIP引导的3D点云防御方法、装置、设备及介质,涉及点云防御技术领域,旨在通过利用对比语言‑图像预训练模型增强3D点云数据在面对对抗性攻击时的鲁棒性和安全性。本方法通过结合几何和语义特征,提出了一种新的防御框架,能够有效识别并抑制后门攻击中的触发器,同时修复点云数据的几何结构,提升分类性能。具体地,该方法包括将3D点云投影为多视角2D深度图,利用CLIP模型提取跨模态特征,并通过变分自编码器(VAE)进行语义引导的3D重建,以生成既保留关键信息又中和扰动的修复点云。该方法在多种复杂场景下展现出卓越的性能,为3D视觉技术在关键应用中的安全性提供了有力支持。
技术关键词
深度图
生成图像特征
重建误差
重建点云
深度值
文本
网格
边缘增强算法
消除噪声干扰
双边滤波算法
变量
3D点云数据
坐标
防御设备
预训练模型
投影单元
处理器