摘要
本发明公开了多模态知识图谱和多模态大语言模型的信息检测方法,包括有S1多模态知识图谱设计;S2知识图谱推理;S3、多模态大语言模型预测,将多模态知识图谱以及新闻文本模态和图像模态一起输入到多模态大语言模型中,多模态大语言模型根据判断新闻真假的问题,推理知识图谱的哪些关系和三元组对产生预测的答案有利,把线性化的多模态知识图谱和文本,图像输入到多模态大语言模型,进行最终的预测,解决大语言模型可能会产生与已知事实不符的信息,且无法掌握特定领域信息的问题。
技术关键词
大语言模型
信息检测方法
多模态
实体
文本
知识图谱推理
图像
知识图谱库
跨模态
三元组
匹配模块
编码
预训练语言模型
关系
条目
维基百科
代表
识别器
视觉
系统为您推荐了相关专利信息
智能化管控系统
消防安全管理
多模态传感器
数字孪生建模
数据处理服务器
医疗数据分析方法
决策
非结构化日志
动态规则库
损失函数优化
智能分析方法
文本编码器
图像编码器
跨模态
文本特征向量
地下水修复过程
智能监管方法
地下水修复剂
效能
智能监管系统