一种智慧医疗环境下的高效多模态摔倒检测方法

本发明属于多模态数据处理领域，涉及一种智慧医疗环境下的高效多模态摔倒检测方法，包括：采集多模态数据并输入训练好的多模态摔倒检测模型，得到检测结果；摔倒检测模型的训练过程包括：采集多模态数据并输入多模态特征提取模块得到多模态特征；将多模态特征输入多模态时间对齐模块得到多模态时间对齐特征；将时间对齐特征输入深度融合模块得到深度融合特征；将深度融合特征输入分类模块得到检测结果；计算多任务损失函数值，根据多任务损失函数值更新模型参数直到得到训练好的摔倒检测模型；本发明通过模态贡献评估与动态时间规整实现多模态数据的对齐，结合关键模态与瓶颈机制实现多模态数据融合，能够提高检测精度和鲁棒性并降低计算复杂度。