摘要
本发明涉及心理健康评估领域,公开了一种交互式的心理评估方法、装置、设备及存储介质。该方法包括:通过文本转语音模型,将DSM‑5心理评估题库中的问题文本转化为对应的问题音频;根据问题音频及问题文本,驱动虚拟人物形象,将问题音频传输给用户;获取用户根据问题音频反馈的回答音频,并通过语音识别模型,将回答音频转化为对应的回答文本;获取用户回答时的脸部图像,并根据脸部图像及回答音频,通过多模态模型,得到用户的情绪状态;根据情绪状态及回答文本,通过语音生成模型,驱动虚拟人物形象进行共情回复。在本发明实施例中,能增加评估的互动性,还能够有效引导用户表达真实情感,从而提升了评估结果的有效性和准确性。
技术关键词
虚拟人物形象
心理评估方法
语音识别模型
语音生成模型
音频
文本
评估设备
关键词
评估装置
多模态
深度学习算法
动画技术
可读存储介质
图像
存储器
心理健康
处理器
自然语言
系统为您推荐了相关专利信息
语音控制指令
混合现实设备
语音定位方法
图像
标记方式
会议记录设备
分配槽
音频
信息采集模块
会议现场
图谱特征
多模态特征
矩阵
实体
知识图谱构建方法