多模态信息处理方法和装置、存储介质和程序产品

本公开提供一种多模态信息处理方法和装置、存储介质和程序产品。多模态信息处理方法包括：利用第一机器学习模型对口腔图像特征和非结构化文本特征进行处理，以得到第一特征；利用第二机器学习模型对口腔图像特征、非结构化文本特征和结构化文本特征进行处理，以得到第二特征；利用第三机器学习模型对非结构化文本特征和结构化文本特征进行处理，以得到第三特征；根据第一特征、第二特征和第三特征，确定输出特征，其中输出特征包括与结构信息对应的第一特征图、与细节信息对应的第二特征图和与语义信息对应的第三特征图；对第一特征图、第二特征图和第三特征图进行分类处理，得到第一分类结果。