摘要
本发明提出一种基于键值的分布式异源多模态数据管理系统及方法,其中,系统包括:数据采集模块、数据分析模块、数据储存模块、OLAP分析引擎和OLTP读写引擎。本发明采用多副本方式保证数据的一致性和鲁棒性,无论是关系型数据还是文件型数据,都能够通过多副本的方式在系统中进行备份和存储,确保数据的安全和可靠性。这种数据一致性和可靠性的保障将极大地降低数据管理系统的风险,避免了数据丢失或损坏的可能性,保护了用户的数据资产,本发明还设计了支持高效分布式查询处理的存储模式,满足ACID约束,为用户提供持久化和读写服务,对于文件型数据,本发明将value分离出来单独存储,降低了写放大现象,节省了I/O带宽和CPU资源,提供了高效的读写性能。
技术关键词
关系型数据
数据管理系统
数据储存模块
数据分析模块
数据采集模块
键值
数据管理方法
文件系统
节点
索引
多模态
分块
备份
存储技术
副本
对象
指针
鲁棒性