摘要
一种基于证据深度学习的多模态情感分类方法及系统,包括创建多模态情感数据集;构建一种基于证据深度学习的多模态情感分类模型,包括数据预处理模块、证据提取模块、类别可信度和分类不确定性估计模块、决策融合模块;使用多模态情感数据集中的样本训练模型;利用训练好的模型对新输入的短视频进行情感分类。综合利用视频、语音和文本三种模态的关键证据,通过Dirichlet分布参数化来评估每个模态在分类决策中的类别可信度和分类结果不确定性,并通过Dempster组合规则构建一个可靠且可信的分类决策框架,不仅提升了情感分类的准确率和鲁棒性,还能给出最终决策的整体分类不确定性评估,提供了更好的模型解释性和决策可信度。
技术关键词
情感类别
情感分类方法
情感分类模型
样本
文本
语音
多模态
模块
情感分类系统
语义
深度神经网络
MFCC特征
短时傅里叶变换
决策
离散余弦
数据
误差反向传播
视音频
视频帧
系统为您推荐了相关专利信息
多模态数据分析
火灾预测技术
预测森林火灾
数据采集模块
森林火灾监测
沙箱
虚拟机进程信息
模块
恶意样本检测
动态链接库
多传感器系统
特征提取网络
无人机飞行数据
多模态特征
异常检测方法
大语言模型
标识
训练文本数据
文本识别模型
交互方法