一种基于语言规则知识引导的无监督语音单元边界查找方法

本发明涉及一种基于语言规则知识引导的无监督语音单元边界查找方法，属语音识别领域。本发明设计了语音段级表征提取模块、音素级生成对抗学习模块、语言知识主导的评分奖励模块；语音段级表征提取模块从原始语音输入中提取连续的语音特征，通过迭代训练的分割模型获取语音单元边界预测信息，基于边界信息对同一分段内降维后的语音特征序列进行均值池化操作，以获取语音的段级表征；音素级生成对抗学习模块生成器生成的输出序列交给判别器进行判别；语言知识主导的评分奖励模块用于生成奖励信号，以指导分割模型学习语音中的潜在结构模式。本发明能够有效的提高语音单元边界检测的能力和跨模态对齐的准确性。