基于多模态数据融合的耳鼻喉科智能诊断与监测系统

本申请提供一种基于多模态数据融合的耳鼻喉科智能诊断与监测系统，涉及多模态数据融合技术领域，获取多模态监测数据，提取患者的内窥镜监测图像；对内窥镜监测图像进行边缘监测，得到内窥镜监测边缘图像，依据内窥镜监测边缘图像生成分泌物扰动掩膜，根据分泌物扰动掩膜和内窥镜监测图像确定内窥镜监测复原图像；确定内窥镜监测复原图像中各个像素点的像素决策窗口，基于对应的像素决策窗口进行信息决策，得到内窥镜监测决策图像；提取监测文本数据，对监测文本数据和内窥镜监测决策图像进行特征融合，生成融合关联图谱。本申请可以提高内窥镜监测图像的图像质量，并结合监测文本生成患者的关联图谱，以实现耳鼻喉监测中的知识融合。