摘要
本发明提供一种基于多模态证据的新生儿疼痛分类方法及系统,该方法包括:采集新生儿视频片段以及与视频同步的心电信号,构建包含疼痛标签的新生儿疼痛多模态数据集;构建基于多模态证据的新生儿疼痛分类模型,该模型包括数据处理模块、证据提取模块、类别置信度和分类不确定性估计模块以及决策融合模块;使用新生儿疼痛多模态数据集中的样本训练模型;利用训练后的模型对新输入的新生儿视频和心电信号进行疼痛分类。本发明通过结合Dirichlet分布与证据理论,分别对表情、姿态和心电模态的疼痛类别概率分布及分类不确定性进行预测,并将预测结果进行决策融合,在实现疼痛分类的同时提供分类不确定性评估,增强了模型的可靠性和可解释性。
技术关键词
多模态
分类方法
数据处理模块
电信号
注意力
表情数据处理
误差反向传播
视频同步
心电数据处理
序列
图像
心电特征
参数
模型训练模块
视频帧
决策
融合规则
数据采集模块
系统为您推荐了相关专利信息
元素
FastText算法
自然语言
业务流程建模方法
文本
可穿戴设备
运动模式识别
生成规则
运动训练
数据获取模块
多模态深度学习
交互方法
融合特征
多模态数据融合
深度学习模型
分析系统
代谢组学数据
多模态
数据采集模块
模态特征