摘要
本发明涉及数据处理技术领域,具体公开了一种复杂密闭环境下数据高效采集、传输、处理方法,包括在复杂密闭环境无ACK机制的无线网络下,针对不同大小的多源数据采集效率低问题,设计多源数据采集管理模块;针对无线网络不稳定导致数据传输失败问题,设计断点续传框架;针对多源数据元信息管理效率低、复杂密闭弱网环境数据传输正确性和无ACK机制无线网络等问题,分别设计采集节点与接收节点数据交互框架、数据完整校验处理框架及二者之间的交互框架。本发明采用上述的一种复杂密闭环境下数据高效采集、传输、处理方法,通过数据完整校验处理框架,保障弱网环境下数据传输的完整性、准确性,当接收端数据切片缺失时,能够快速定位缺失的片段。
技术关键词
切片
关系型数据库
多线程
标识
交互框架
数据采集管理
元信息管理
HDFS分布式文件系统
弱网环境
无线网络
标志位
接收端
字段
节点数据交互
摘要算法
校验信息
数据传输失败
断点
系统为您推荐了相关专利信息
微生物检测方法
图像分析
微生物检测系统
周期
小波神经网络
定位信号强度
立体
信息可视化方法
网格模型
构建无人机
分布式计算节点
分片
多源异构数据
分布式存储节点
RPA机器人
电子设备标识
移动热点
列表
数据处理系统
地理位置信息