基于融合分解与主干聚拢的多模态情感分析方法及系统

本发明涉及多模态情感分析技术领域，尤其是涉及基于融合分解与主干聚拢的多模态情感分析方法及系统。所述方法，包括获取带有不确定缺失的多模态数据，构建情感分析模型，利用训练完成的模型输出情感预测结果。本发明的基于融合分解与主干聚拢的多模态情感分析方法，提出了金字塔多头注意力机制，金字塔多头注意力机制通过层层递进的方式逐步增加注意力头的数量，并自适应结合各层的结果，从而更好地提取不同模态中的多层次特征信息，提高情感分析的准确性和鲁棒性；此外，为了节省多头注意力的资源消耗以及提升运行速度，将多头注意力中的值（V）去掉，直接用键（K）来代替V，以此去掉V相关的操作来提升性能。