公式识别及模型训练方法、装置、相关设备及程序产品

本申请公开了一种公式识别及模型训练方法、装置、相关设备及程序产品，涉及人工智能技术领域。本申请的公式识别模型中的图像特征提取模块和公式字符解码模块在训练阶段，与公式结构解码模块联合训练，公式解码结构模块基于图像特征提取模块输出的图像特征解码输出公式结构信息，公式结构信息表示公式字符序列的结构层级，联合训练过程分别对公式字符解码模块和公式结构解码模块的输出结果进行监督学习。公式结构提供了强大的上下文约束，迫使公式识别模型在特征提取阶段即需要理解和编码公式的结构和层级关系，提取能够表征不同字符空间关系的特征，这种特征能够更好的辅助公式字符解码模块的字符解码，提升公式识别结果的准确度。