摘要
本申请公开了一种基于Langchain的建筑规范图示多模态问答方法及设备,属于人工智能与建筑行业交叉技术领域,用于解决建筑行业规范图示问答中多模态信息处理困难、查询效率低等问题。方法包括:构建建筑规范多模态数据库,对建筑规范多模态数据进行存储管理;基于用户查询指令,从不同维度对所述多模态数据库进行检索;依据检索结果,生成与用户查询指令对应的结构化答案;对所述结构化答案进行图文一致性校验,校验通过后,输出所述用户查询指令的对应答案。本申请通过上述方法构建了完整的建筑规范问答系统方法体系,实现了高效、准确的建筑规范多模态问答,提升了建筑规范的查询效率。
技术关键词
多模态数据库
建筑
问答方法
文本特征向量
答案
BERT模型
指令
图文
语义特征提取
格式
排序模型
问答系统
语义向量
编码规则
生成用户
图片
列表