基于视觉与深度学习的多模态发票图像处理方法、装置及介质

本发明公开一种基于视觉与深度学习的多模态发票图像处理方法、装置及介质，涉及图像数字处理技术领域。该方法包括：根据表格边缘的角度以及二维码定位框的角度计算融合旋转角度，以此对发票图像进行旋转，得到第一图像；将第一图像输入至表格检测模块中，提取出第一表格特征，并对第一表格特征采用非极大值抑制和噪声过滤处理，得到第二表格特征；对第二表格特征进行单元格修复处理，得到第三表格特征；构建OCR模块，利用OCR模块从第三表格特征中提取出文本特征；将所文本特征与二维码解析数据进行比较，以判断一致性；在判断为一致的情况下，基于正则表达式和语义规则从文本特征中提取出关键字段。本发明可大幅提升发票处理的效率和准确性。