摘要
本公开提供了基于互补融合的全媒体融合方法及系统,涉及融合通信领域。该方法包括从多个媒体来源采集不同类型的媒体数据,按照预设的分段策略,划分为若干可处理的媒体单元;针对不同类型的媒体数据分别进行特征提取,生成对应的基础特征向量;利用伪查询模块,生成关联的伪查询向量;将基础特征向量和伪查询向量输入至隐式交互模块,输出融合后的媒体表示向量;将媒体表示向量及其对应的媒体元数据存储至向量数据库中,并在向量数据库中为媒体表示向量建立索引;响应于接收到针对目标媒体单元的融合请求时,通过检索向量数据库获取与目标媒体单元匹配的媒体资源,以进行目标媒体单元的跨媒体展示。
技术关键词
媒体
融合方法
数据存储
格式化
特征提取模块
基础
预训练语言模型
语音识别模型
资源
文本
音频
索引算法
视频
融合系统
融合策略
图像
搜索算法
系统为您推荐了相关专利信息
风险评估方法
风险评估模型
实时数据库
日志
神经网络模型
弱监督学习
图像检测方法
炎症性肠病
图像块
注意力