一种应用于政数咨询的手势唇语识别的操作方法

本发明公开了一种应用于政数咨询的手势唇语识别的操作方法，包括以下步骤：S1、摄像模块拍摄用户的手势和唇语的视频并通过预处理分别得出手势图像数据集和唇语图像数据集；S2、将手势图像数据集代入手势识别模型得出手势识别数据集，将唇语图像数据集代入唇语识别模型得出唇语识别数据集；S3、根据手语识别提问数据集和唇语识别提问数据集搜索预设于控制模块的答复数据并通过显示模块显示；采用上述操作方法，用户可以通过手语或\和唇语向咨询台进行咨询，方便了特殊群体，避免市民办事难的困境。