摘要
本发明提出了一种多模态内容安全检测方法、装置、存储介质及产品,属于数据处理技术领域,所述方法包括:自待检测内容中获取多模态数据;将多模态数据输入预先训练的多模态表征模型,得到相应表征向量;将各模态数据的表征向量统一至预设维度并对齐,并对对齐后的各模态表征向量进行融合,得到多模态的最终表征向量;将多模态的最终表征向量输入预先训练的提取模型,得到多模态特征向量;将所述多模态特征向量输入预先训练的检测模型,得到潜在垃圾信息和正常信息分类。本发明采用多模态数据进行安全检测,具有方法简单,运行速度快,准确率高的优点。
技术关键词
多模态
人工神经网络
音频
图像
文本
上采样
二分类器
数据处理技术
计算机程序产品
垃圾
模块
可读存储介质
处理器
标签
线性
速度