摘要
本发明公开了一种基于多模态动态融合的智能客服服务方法及系统,其中,方法包括获取用户服务需求以及在服务终端上的行为日志;对用户服务需求和行为日志进行特征提取以及动态融合;然后将融合特征输入至多任务学习模型获得意图类别和情感评分;以及基于意图类别和情感评分通过强化学习生成服务动作。本发明通过多模态动态融合和主动服务机制,能够更准确地理解用户意图,并在第一时间提供相应的服务动作,从而减少对话轮次,提升服务效率。
技术关键词
智能客服
意图类别
多任务学习模型
强化学习网络
动态
服务终端
日志
多模态特征
融合特征
数据处理单元
服务系统
语音
数据获取单元
文本
特征提取模块
注意力机制
分析单元