一种基于多模态数据源的河湖乱建识别方法

本申请公开了一种基于多模态数据源的河湖乱建识别方法，包括：根据批准的审批文件，通过RAG和LLM技术自动提取建筑文本信息，将建筑物绘制到地图上，生成建筑矢量信息并构建审批建筑矢量库；通过获取遥感影像，对遥感影像数据预处理，采用语义分割神经网络UNet模型实现建筑物的分割提取；对正射影像进行数据预处理，采用MaskDINO模型对预处理后的正射影像进行建筑物分割处理；筛选水域管理线内的建筑物识别结果，结合审批建筑矢量库，判断新增建筑是否审批、是否违规扩建；通过web系统将同一河湖空间下不同时间的建筑识别结果进行对比展示，获取新增建筑的轮廓并通过不同颜色展示新增建筑是否审批和是否违规扩建。本申请提出的方法能更加准确的判断违建信息。