摘要
本发明公开了一种基于多模态融合推理技术的案件现场重建还原方法与系统,包括:采集案情现场信息;采用结构光加双目相机的方式,进行现场三维空间重建以及物证拍照提取;提取案情的相关多模态数据语义特征;构建多模态知识图谱;采用多模态异构图来描述现场物证,采用跨模态图卷积对多模态异构图进行推理;采用基于循环神经网络的动态推演算法推演知识图谱中的关键系数,为构建案情现场异构知识图谱提供基础;将案情逻辑进行可视化展现;采用推理链和VR技术相结合的方法,可视化展现案件发生的逻辑关系。
技术关键词
案件现场
推理技术
多模态
还原方法
三维扫描装置
现场物证
图谱
跨模态
现场信息采集
异构
语义特征
虚拟现实场景
双目相机
自然语言理解技术
三维重建平台
案发现场
数据识别技术
三维扫描技术
视频监控数据