摘要
本发明公开了一种基于多模态数据处理的云平台审核方法,涉及云平台审核技术领域,本发明,对文本、图像、音频、视频和日志数据的独立特征提取,使各模态信息能够在相应的特征空间中进行细化分析,在跨模态特征融合阶段,利用跨模态一致性对比网络CMCN计算不同模态数据之间的关联性,并通过注意力机制优化特征对齐,使得多模态信息能够相互验证,减少独立审核造成的误判和漏判;审核决策环节构建基于深度学习的审核模型,并结合异常检测和自适应风险控制阈值,实现端到端的违规内容判定,提高审核系统的智能化水平;此外,通过可视化标注图像和视频的可疑区域、利用自然语言生成NLG模型生成审核结论,使审核结果更加透明。
技术关键词
模态特征
审核方法
跨模态
审核模型
多模态
文本
视频
自然语言
注意力机制
关键词
自动语音识别技术
音频
数据
图像
云平台
日志
计算机视觉
字符