摘要
本发明公开了一种基于多模态输入的心理健康支持对话生成方法,包括:1.获取文本数据并进行预处理;2.计算上下文相似度,得到高质量示例集;3.利用视觉语言模型从图像中提取关键视觉线索,包括面部表情、动作和情感;4.集成外部常识知识库以理解用户的情感和意图;5.通过用大语言模型生成咨询策略;6.结合上下文的对话生成。本发明通过综合利用视觉信息、对话上下文及咨询策略,增强大型语言模型在心理健康对话中的表现,能够生成更细致、富有同理心的支持性回复,从而在情感识别和响应质量方面具有显著提升,能够更全面地理解和回应用户的情感状态,以有效改善心理健康支持的效果。
技术关键词
对话生成方法
心理健康
大语言模型
文本
语义向量空间
多模态对话
视觉
策略
可读存储介质
处理器
综合性
面部
序列
存储器
度函数
样本
关系
系统为您推荐了相关专利信息
学习方法
编码器
解码器
跨模态数据
多模态数据分析