摘要
本发明提供一种基于多模态大模型和认知行为疗法的智能心理咨询系统,利用多模态大模型识别来自用户端的语音,得到文字信息和情绪状态信息;利用大语言模型分析文字信息与此与用户端进行对话,并从对话提取用户端的心理状态信息;还根据情绪状态信息确定与用户端匹配的认知行为治疗策略,从而利用多模态大模型根据匹配的认知行为治疗策略,生成对用户端的语音响应;结合多模态大模型和大语言模型实现对用户端准确高效自然语言理解,提供高度拟人的语音响应,降低对专业心理咨询师依赖,能够突破心理咨询服务在时间地域上的限制,全天候和低成本地满足大规模咨询服务需求,改善咨询过程的人机交互体验,提供高质量、高实用性的心理咨询与治疗服务。
技术关键词
心理咨询系统
面部图像数据
多模态
情绪状态信息
面部关键点
大语言模型
数值
语音声学特征
语义关键词
输入模块
策略
深度神经网络架构
声学特征分析
面部表情分析
语句
人机交互体验
系统为您推荐了相关专利信息
场景分析方法
多模态
生成测试报告
风险
计算机程序指令
张量分解方法
兴趣
增量更新方法
物品特征
推荐系统