摘要
本发明涉及涉及大健康和人工智能技术领域,具体提供了一种基于多模态大模型的中医舌诊药饮推荐方法,包括:根据预处理后的舌象图像,采用BLIP‑2作为多模态编码框架提取完整查询向量组;基于完整查询向量组构建视觉语义向量;采用大型语言模型,基于视觉语义向量生成舌象病症描述;构建药饮知识库,基于药饮知识库对舌象病症描述以及用户自述进行检索,获取最终候选药饮;基于大型语言模型,根据所述舌象病症描述以及最终候选药饮,结合目标模板生成推荐方案。本发明借助BLIP‑2模型的跨模态表示能力,将用户文本描述与舌象图像特征联合建模,并基于语言模型生成个性化的健康状态描述,为后续药饮推荐提供更加精准的语义基础。
技术关键词
推荐方法
多模态
语义向量
舌象图像
编码框架
序列
大语言模型
人工智能技术
注意力
生成特征
视觉特征
关键词
模板
阶段
字段
做法
文本
系统为您推荐了相关专利信息
智能管理方法
多模态数据融合
金融交易系统
量子神经网络
强化学习环境
模态特征
模型训练方法
视频理解方法
记忆
数据编码
光学卫星遥感影像
种植面积提取
多模态数据融合
多极化特征
纹理特征