摘要
本发明涉及金融大模型技术领域,提供一种用于多模态金融文档合规分析的RAG方法及系统,包括对输入的多模态金融文档进行预处理,将多模态金融文档中的多模态数据生成对应的文本块,构建对应的向量数据库;响应于目标查询请求;根据目标查询语句,进入多路径检索过程生成用于响应子查询语句的捆绑包;基于多路径检索模块生成的捆绑包,计算每个捆绑包与子查询语句的语义对齐度,结合时间奖励机制计算对应的时间奖励分获取匹配得分,通过直接偏好优化机制对匹配得分进行排名优化,获取偏好文本块集来响应生成对应答案,通过整合金融文档的预处理、检索和重排序模块,有效解决传统方法在处理异构金融数据、提高检索召回率和相关性方面的不足。
技术关键词
文本
语句
多模态
金融
多路径
动态捆绑
大语言模型
编码器
语义
模块
机制
答案
数据
表格
样本
客户端
实体
自然语言
图像块
系统为您推荐了相关专利信息
数据融合方法
多模态数据融合
运动特征
在线校准
噪声
评审系统
评分算法
模态分析
视频分析技术
大学生创新创业
超级电容混合储能
智能管理平台
模块
快装接口
能效