摘要
本发明提供了基于多模态交互的无障碍智能导医方法及平台,涉及多模态交互技术领域,包括:根据双模态状态采集单元获取用户时序状态数据进行导医支持状态检测,输出目标导医支持模态;调用目标模态导医交互容器;采用用户输入的导医需求数据,遍历医疗资源导航图谱定位初始交互节点;将交互响应回复转换为模态问诊响应进行用户初始需求意图回复;依据用户的更新反馈需求,执行多轮需求意图解析,输出科室导航建议标签集;将需求交互记录和科室导航建议标签集打包为导医需求告警发送至目标辅助导医。本发明解决了现有技术通常依赖单一模态交互,无法为特殊群体提供全面的支持,进而影响用户体验和服务效率的技术问题。
技术关键词
智能导医方法
多模态交互
意图
时序
节点
音频
双模态
采集单元
图谱
资源
医院HIS系统
梅尔频率倒谱系数
辅助设备
声学特征
序列
状态检测模块
容器
多任务
数据
平台
系统为您推荐了相关专利信息
电网关键节点
电网仿真模型
电网负载预测
断线故障
过载故障
价值评估系统
深度信念网络
标签
分布式爬虫集群
隐式特征
批处理调度方法
加速卡
分布式系统
数据分布
神经网络训练