摘要
本申请涉及数据处理技术领域,尤其涉及一种基于最优传输算法的多源数据融合方法及系统,方法包括获取输入数据源,提取每个数据源的特征向量;将每个数据源的特征向量合并进行聚类操作生成原型集合,通过计算跨模态向量与原型集合中的向量之间的跳转概率定义多路径跳跃通路的联合权重分布,基于联合权重分布得到融合多条语义路径代价的熵加权多路径原型桥接代价;基于最优传输算法与熵加权多路径原型桥接代价构建稀疏最优传输矩阵;利用稀疏最优传输矩阵对提取的每个数据源的特征向量进行跨模态加权对齐与增强表示构建,生成多模态融合表征。本申请能够在保证数据融合的精度和效率的前提下,同时减少其对计算资源的消耗。
技术关键词
加权多路径
数据融合方法
原型
跨模态
视频特征向量
算法
聚类
掩码矩阵
文本特征向量
图像特征向量
融合策略
多模态特征融合
数据融合系统
预训练语言模型
系统为您推荐了相关专利信息
图像增强方法
雷达
变换器
径向速度信息
相机系统
工艺调控方法
粒子群算法
补偿技术
调控系统
热成像