摘要
本申请涉及医学教育相关领域,具体是涉及一种基于多模态大模型的虚拟标准化病人构建方法;包括多模态数据预处理模块、跨学科适配框架、混合专家模型架构、动态交互响应系统四个模块;混合专家模型架构将多模态数据预处理模块的多模态病例库和跨学科适配框架的场景参数进行融合推理,生成具备情感的虚拟标准化病人模型;动态交互响应系统根据混合专家模型的虚拟标准化病人模型对学生进行提问,并识别学生的回答和互动;将学生的回答及互动数据传输给混合专家模型架构的虚拟标准化病人模型进行推理,依据混合专家模型架构的推理结果向学生进一步提问,直至考核结束;通过本申请生成的虚拟标准化病人,更具备病人的真实的情感状态,互动更加真实,并且根据推理学生问题,进行更加符合人物特征的互动。
技术关键词
标准化病人
多模态
学生
仿真教学设备
情感特征
动态
模块
参数
场景
面部
数据
医学知识图谱
生理
生成数字人
框架
语音
构建知识图谱
知识图谱构建
信号
强度
系统为您推荐了相关专利信息
融合特征
决策
推理方法
计算机程序产品
融合算法
配电室
热电厂
设备状态数据
识别方法
高清摄像机