一种用于智能客服系统的大规模文本数据清洗与标注方法

本发明涉及一种用于智能客服系统的大规模文本数据清洗与标注方法。清洗与标注方法包括如下过程：预处理模块将长文本数据分割为多个不同的句子，得到文本数据模块；数据分配模块将文本数据模块分配到数据清洗层中与智能标注模型对应的清洗模块；智能标注模型从相应的存储区域获取相应的清洗后的文本数据模块，并对文本数据模块进行标注，从而生成相应的文本样本。本发明可以提高智能标注模型进行标注的准确性。