基于多模态感知的指导方法、装置、设备及介质

本发明涉及人工智能技术领域，可应用于医疗健康金、融科技及心理健康调养等业务场景中，公开了一种基于多模态感知的指导方法、装置、设备及介质，包括：采集生理指标数据和运动轨迹数据，生成多模态身体数据集，输入预训练的身心关联模型，生成身心状态映射关系；结合三维场景模型库和动态注意力参数，生成沉浸式交互场景，基于领域知识图谱解析场景交互指令；融合用户画像和实时状态向量，生成综合决策参数，根据综合决策参数与场景交互指令的特征相似度，从指导内容库筛选个性化指导内容并输出。本发明通过多模态数据采集与身心状态建模，实现对用户生理状态与行为特征的精准感知，结合沉浸式场景交互与知识图谱解析，提高个性化指导的准确性。