一种多模态智能医疗教学实训系统及数据处理方法

本发明公开了一种多模态智能医疗教学实训系统及数据处理方法，系统包括：医疗数据数据采集模块：用于采集多源异构医疗数据；预处理模块：对采集的医疗数据进行预处理，包括数据同步；医疗数据质量评估模块：采用质量评分函数对医疗数据质量进行评估，得到数据质量评估结果，若评估结果高于设定值，则对相应医疗数据进行特征提取；特征提取模块：利用多分支神经网络对质量评估后的医疗数据进行医疗特征提取，所述多分支神经网络包括CNN分支、RNN分支和GNN分支，分别提取医疗特征中的时频特征、时序特征、空间特征；特征融合模块：采用融合函数对特征提取模块获得的各分支医疗特征进行特征融合，将不同分支提取的多模态特征相结合，形成统一的特征表示。本发明的系统及方法可以提高多源异构数据同步的精度。