基于分类模型的长文本处理方法、装置、设备及介质

AITNT
正文
推荐专利
基于分类模型的长文本处理方法、装置、设备及介质
申请号:CN202411001770
申请日期:2024-07-25
公开号:CN118568569B
公开日期:2024-11-26
类型:发明专利
摘要
本申请涉及一种基于分类模型的长文本处理方法、装置、设备及介质,其中方法包括:获取待压缩长文本数据,并对待压缩长文本数据进行预处理,得到文本特征和预处理后文本;通过预先训练的分类模型对文本特征进行算法预测,得到目标压缩算法组合;对预处理后文本进行数据编码,得到编码后文本;基于目标压缩算法组合对编码后文本进行多级压缩处理,得到目标压缩数据;若接收到数据恢复指令,则对目标压缩数据进行多级解压和数据恢复处理,得到目标恢复数据。本申请实现了提高长文本的压缩率,降低了压缩成本,保证压缩后文本的完整性和可读性,实现了压缩数据的快速解压与恢复。
技术关键词
压缩算法 文本处理方法 压缩单元 数据编码 字符 样本收集单元 并行处理技术 文本处理装置 特征提取单元 可读存储介质 分块 指令 模式 加密算法 处理器
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号