摘要
本发明涉及自然语言处理技术领域,尤其涉及面向智能家居对话系统的语义理解与表示学习方法,具体如下:通过智能家居上的传感器捕捉用户使用期间的数据构建数据集;对数据集中数据进行层次化建模,进而构造多模态层次化结构图,通过融合不同模态进而增强对上下文的理解,最后输出增强后数据集;将增强后数据集中数据输入至具有动态自适应的知识调控机制模型,判定是否引入相关知识,再对引入的相关知识进行层次化建模与多模态融合,与增强后的数据集构成新的数据集;判断采集的实时数据是否一致,确定是否唤醒智能家居对话系统。本发明能够提高智能家居对话系统的逆商,有助于对用户意图的深层次精细化捕捉,带给用户更加智能的体验。
技术关键词
面向智能家居
对话系统
学习方法
文本
语义
图像
多模态
上下文特征
音频
节点
传感器
分支
视频
机制
语音解码器
视觉
注意力参数
实时数据
解析器