摘要
本发明适用于融媒体信息处理技术领域,提供了一种基于动态情感图谱的多模态融媒体生成系统及方法,包括作为系统的数据输入口的多模态感知模块;所述多模态感知模块输出时间戳对齐的多维数值向量;用于输出动态情感图谱的动态情感图谱建模模块;用于检索并触发最适配的渲染指令集的渲染规则匹配模块;调用详细渲染指令的调度模块;执行渲染指令的多模态渲染执行模块;用于跨模态时序对齐与合成封装的融媒体合成模块;用于输出数据的输出模块。借此,本发明能够通过动态情感图谱自动驱动多模态渲染规则的匹配与执行,彻底取代传统人工分步操作模式,实现全流程自动化渲染处理。
技术关键词
媒体生成系统
图谱
多模态
渲染单元
过渡策略
动态
Softmax函数
媒体信息处理技术
时间序列模型
文本特征向量
匹配模块
节点
梅尔频率倒谱系数
声学信号处理
面部动作单元
输出模块
音频特征提取
视觉特征提取
系统为您推荐了相关专利信息
智能辅助系统
分析模块
数据采集模块
智能辅助方法
语音采集模块
新闻推荐方法
视频特征向量
兴趣特征向量
语义向量
图谱