摘要
本发明公开了基于多模态特征融合与动态权重分配的智能文档对比方法,为适用于不同类型文档的对比需求,将文档中各种类型的信息进行特征提取;将各模态特征进行对齐,并采用训练好的特征融合模型对所提取的特征进行特征融合,输出特征向量,用于进一步对文档整体内容进行比较,采取多模态技术手段,提供多类型比较对象,使文档的对比不仅限于文本特征,还可以结合语义、上下文结构进行文档对比;为提升多模态特征融合数据的稳定性和有效性,通过加入动态权重分配机制,对模态融合过程进行权重分配,并通过训练好的特征融合模型对各模态特征进行加权融合,以提升文档对比精度和实用性。
技术关键词
多模态特征融合
动态权重分配
智能文档
双向长短期记忆网络
权重分配机制
视觉特征
预训练语言模型
语义特征
注意力
跨模态
文本
有效性
关系
校正
模块