摘要
本发明提供了一种智能知识问答方法、装置、设备及存储介质,该方法包括:通过对用户上传的金融问题进行信息识别,提取专业术语、金融实体、问题类型和视觉需求,将金融问题转化为结构化查询意图表示;根据查询意图在金融知识库中检索文本内容及视觉信息,进行多模态融合形成金融知识包;对视觉信息应用双重注意力机制,通过空间注意力网络和通道注意力网络提取关键区域特征和关键属性特征,并整合得到融合特征;最后根据融合特征与文本内容建立对应关系,提取高相关性信息片段进行知识推理与合规处理,生成多模态金融回答。本发明能够有效处理金融领域的复杂多模态信息,提供专业、准确且符合监管要求的回答,适用于各类金融咨询与决策支持场景。
技术关键词
金融
知识问答方法
空间注意力网络
查询意图
视觉
融合特征
多通道特征
多模态信息融合
文本
注意力机制
合规性
融合器
问答装置
多尺度特征
数据一致性验证
加权特征
实体
系统为您推荐了相关专利信息
病理切片图像
图像编码
预训练模型
大语言模型
分析方法
隧道排水管
多自由度机械臂
视觉检测结构
机器人主体
机器人装置