一种用于数据标准化的人工智能系统

本发明涉及数据标准化技术领域，具体地说，涉及一种用于数据标准化的人工智能系统，包括数据处理模块、数据标准化模块、数据混淆分析模块和数据划分模块，该一种用于数据标准化的人工智能系统中，对数据集合标准化处理后，数据混淆分析模块运用相似度对比法判断，去除多余字符时是否因字符与数据混淆而将数据作为字符去除，或是否保留字符作为数据，若出现上述情况时，则基于学习模型设定字符与数字的相似度阈值，对其混淆的数据重新划分，有效避免在去除多余字符过程中误删有效数据或保留无效字符的情况，确保数据清理的精准性，使得保留下来的数据都是真正有价值的数据，不会因为错误的清理操作而丢失关键信息。