多源素材融合的视频内容生成方法、系统、设备及介质

本申请提供一种多源素材融合的视频内容生成方法、系统、设备及介质。该方法包括实时采集主播侧的多个终端数据，为每一终端数据进行模态分类、全局时间戳的标注、格式标准化处理和结构统一化处理，基于展示意图标注策略对终端数据进行展示意图标签标注。根据模态类型将已预处理的终端数据输入至多模态语义分析引擎，提取语义特征，进行重要性评分。基于预处理的终端数据、模态数据序列、语义特征向量和重要性评分构建带权属性图，依据带权属性图采用融合策略自动生成展示决策方案。基于展示决策方案，结合观众终端的屏幕属性与交互能力，动态生成视觉布局并完成多源素材的展示渲染。本申请能够实现多模态直播数据的同步、智能分析与自适应展示。