基于多模态数据融合的患者运动功能障碍评估系统及方法

本公开实施例提供一种基于多模态数据融合的患者运动功能障碍评估系统及方法，涉及运动功能评估和人工智能领域。系统包括：获取模块，用于获取待评估目标的多模态运动表现数据；第一提取模块，用于提取图像数据和视频数据的人体边界框和分割掩码；增强模块，用于提取所述人体边界框和分割掩码的图像特征并增强所述图像特征；第二提取模块，用于基于深度神经网络提取预处理之后的生理信号数据和语音信号数据的信号特征并增强，得到文本特征；更新模块，用于进行特征更新；融合模块，用于将更新之后的图像特征和文本特征进行特征融合；评估模块，用于得到待评估目标的运动功能评估结果。该方案有效提升了患者运动功能障碍评估结果准确性和效率。