摘要
本发明公开了基于迁移学习的粤语‑普通话失语症自动评测方法,可以充分利用普通话、粤语语音数据进行不同语言的知识传递,并且不需要对粤语、普通话语音数据进行标注,可在粤语‑普通话场景下进行失语症检测;通过从语音数据和由语音数据转录成的文本数据中提取两种语言的语音特征、语义特征和语法特征,并将提取的特征分离为共同特征和私有特征;通过引入对抗领域自适应来对齐粤语和普通话的语音特征、语义特征和语法特征的共同部分,同时采用对比学习中的InfoNCE损失函数最大化输入语音和文本数据与提取出的语音特征、语义特征和语法特征的互信息,确保提取出的特征具有代表性,大大提高了失语症的评测精度。
技术关键词
自动评测方法
失语症
语法特征
语义特征
特征提取器
语音特征
声学特征
文本
样本
滤波器
数据分布
代表
密度
标签
编码
短时间
频率
度量
系统为您推荐了相关专利信息
智能调度方法
文本
面向异构资源
任务分配算法
任务调度
数据入库方法
资产
自然资源
残差神经网络
分层方式
温度实时监测方法
极值
特征点
温度监测系统
可视化功能