摘要
本发明提供一种多模态内容的合规审核方法及系统。所述方法包括步骤:对非结构化的待审核多模态内容进行特征提取,以得到结构化特征向量;对其中的文本语义特征向量和图像视觉特征向量进行图文语义关联,得到涉及图文语义矛盾的融合特征向量;基于待审核多模态内容所属领域的合规性指导数据构建领域知识图谱;将融合特征向量输入领域知识图谱,并采用子图匹配算法进行合规规则检索,以确定融合特征向量对应的违规类型以及违反的合规条款;生成可交互的合规审核报告。所述系统包括一一对应地实现上述各个步骤的各个功能模块。根据本发明的技术方案,能够解决现有的多模态内容合规审核方法跨模态语义分析不精准的问题。
技术关键词
图像视觉特征向量
多模态
语义
审核方法
合规性
文本
注意力
图文
跨模态
视觉特征提取
知识图谱构建
关系建模
矩阵
序列
数据
自然语言
匹配模块
报告
实体
系统为您推荐了相关专利信息
医学知识图谱
事件预警方法
围术期
大语言模型
语句
多模态传感器
监测系统
气溶胶灭火
火情数据
烟雾传感器
核算方法
全生命周期碳足迹
分阶段
动态预测模型
多智能体协同