摘要
本发明公开了基于深度学习的生理状态多模态模拟方法、装置及设备,方法包括:对用户初始语音信息进行解析得到语音解析信息并从场景库获取对应的场景模拟信息,生成与场景模拟信息对应的场景播报信息进行播放,接收到确认语音信息则生成与场景模拟信息对应生理监测信息发送至虚拟监护仪,生成与场景模拟信息对应的生理模拟信息发送至多媒体终端,接收到询问信息则生成对应答复信息并发送至多媒体终端。上述方法基于深度学习的生理状态多模态模拟方法,能够根据用户初始语音信息获取场景模拟信息并模拟生成生理监测信息及生理模拟信息,通过多媒体终端及虚拟监护仪对多模态的生理状态进行体现,大幅提高了模拟场景的真实性并提高了训练效果。
技术关键词
多媒体终端
生理
多模态
监护仪
语音
信息发送单元
场景特征
深度学习模型
询问特征
控制终端
麦克风
融合特征
网络接口
资料
影像
画面
数据
存储器
处理器