摘要
本申请涉及智能问诊技术领域,具体提供了一种基于多模态数据辅助问诊的方法、装置、介质、设备及产品,该方法可以包括:获取目标对象的多类特征对应的特征信息,其中,所述多类特征包括:舌象、面部、脉象或手掌;对所述多类特征中的每类特征进行分区,获取每类特征对应的多个特征点位;按照脏腑生克关系对每类特征对应的多个特征点位进行连接,得到多模态图;将所述多模态图和所述特征信息输入到预训练的网络融合模型中,得到所述目标对象的问诊结果,其中,所述问诊结果包括:证候推理结果和特征热力图。本申请实施例可以为目标对象提供可靠性的辅助性问诊结果。
技术关键词
多类特征
多模态
热力图
网络模块
对象
特征采集设备
计算机程序产品
脉象信息
手掌图像
面部
处理器
可读存储介质
特征点
分区模块
关系
数据
样本
系统为您推荐了相关专利信息
图像融合方法
可见光图像
注意力
拉普拉斯
可视特征
多模态信息融合
记忆
自然语言
信息编码
声学特征提取方法