摘要
本发明属于多模态数据处理技术领域,具体涉及一种面向多模态金融数据的检索增强生成方法。该方法包括:获取文本数据、时序数据和图像数据并对其进行预处理,得到文本嵌入、时序嵌入和图像嵌入;融合文本嵌入、时序嵌入和图像嵌入,得到融合嵌入;获取用户查询,根据用户查询和融合嵌入进行多模态检索,得到文档块;将文档块和扩展后的用户查询输入到生成模型进行处理,得到检索答案;本发明能够给出更精确的检索答案,为用户提供更准确、更细致的预测和决策支持;本发明具有精确度高、灵活性强、效率高的优点。
技术关键词
图像嵌入
模态特征
时序特征
多模态
生成方法
跨模态
文本
多头注意力机制
金融
答案
训练语言模型
GRU模型
大语言模型
数据处理技术
多层感知机
系统为您推荐了相关专利信息
高频同轴电缆
抗干扰方法
外屏蔽
三角支撑架
屏蔽层
电子文档生成方法
继保装置
生成电子报告
数据采集软件
电力系统继电保护技术
能耗预测方法
回归预测模型
顶管机
时间滞后模型
注意力