摘要
本发明属于情感生成模拟领域,提供了一种神经解剖对齐的视听情感生成方法,包括以下步骤:步骤1,视觉模块模拟大脑视觉皮层功能,对视觉情感数据进行处理;步骤2,听觉模块模拟大脑听觉皮层功能,对音频情感数据进行处理;步骤3,融合模块模拟大脑双侧前颞上回区域的视听融合功能,整合视觉模块和听觉模块的输出信号,生成综合特征向量;步骤4,BEL模块模拟大脑杏仁核与眶额皮质的情感互动机制,基于综合特征向量完成仿生情绪学习与生成;步骤5,通过对比生成数据与原始数据的EPP值,验证情感生成的可解释性;本发明通过神经解剖对齐的集成模块化组件改进大脑情感学习和生成仿生机制,提升视听情感生成模型的可解释性。
技术关键词
情感生成方法
大脑情感学习
视听
情感特征
视觉
听觉
融合功能
序列构造方法
节点
生成样本数据
音频
代表
递归神经网络
模块化组件
信号
多层感知机
注意力机制