一种基于多尺度信息融合的食品营养评估方法

本发明涉及深度学习以及食品分析技术领域，具体指一种基于多尺度信息融合的食品营养评估方法，包括：分别提取食品RGB图像、深度图像的各个尺度的RGB图像特征、深度图像特征；设计多模态融合算法，融合每一尺度的RGB图像特征与深度图像特征，得到每一尺度的目标融合特征；设计基于双向特征金字塔的多尺度特征融合算法，增强每一尺度的目标融合特征，得到每一尺度的双向增强融合特征；基于各个尺度的双向增强融合特征，采用多任务学习，预测多种营养素。本发明引入深度图像特征来获取三维空间信息，提取图像特征，并通过多模态融合与双向特征金字塔融合算法，获得了语义信息与细节信息丰富的特征，可为营养评估提供了精确的结果。