一种基于多模态融合的耳鸣患者智能社交辅助系统及方法

本发明提供了一种基于多模态融合的耳鸣患者智能社交辅助系统及方法，涉及医疗辅助技术领域，包括：采集环境声音信号、语音信号以及图像数据，并进行初步处理；制定个性化自适应降噪算法以及语音增强算法，进而获得增强语音信号；构建唇语识别模型，对增强语音信号进行转换修正处理；构建耳鸣特征数据库，根据个人耳鸣参数从耳鸣特征数据库中筛选耳鸣掩蔽音效；获取耳鸣患者在社交时耳鸣与环境因素之间的关联关系，根据关联关系以及耳鸣掩蔽音效，提供个性化的预防建议；将对应的增强语音信号以及初步处理后的图像数据上传至云端服务器，进而对个性化自适应降噪算法以及语音增强算法进行优化。