唇语识别方法、装置、存储介质及唇语识别系统

本申请提供了一种唇语识别方法、装置、存储介质及唇语识别系统。本申请可根据第一可见图像中的唇部关键点确定第一图像质量得分，根据第一不可见光图像中的唇部关键点确定第二图像质量得分，并依据第一图像质量得分和第二图像质量得分，将可见光识别模式、不可见光识别模式和融合模式中图像质量最高的模式作为当前识别模式，且基于当前识别模式所对应的图像帧进行唇语识别。如此，可捕捉唇部微光环境的空间分布特性，并将光照补偿机制从整体环境层级细化至唇部区域层级。即使在复杂光照环境下，本申请也能将唇部区域图像质量最高的图像帧作为唇语识别的基础，从而可保留唇部纹理细节并降低噪声干扰，进而可提高唇语识别的准确性。