摘要
本发明提供了一种基于Parquet格式的多模态数据增强存储系统,通过对Parquet格式的原生改造与扩展实现多模态数据的统一存储与优化。系统包含模态感知格式扩展组件和模态优化编码策略组件:前者通过扩展Parquet逻辑类型系统及构建文件级至页级的四层层次化元数据架构,实现多模态语义与存储结构的深度融合;后者与Parquet压缩算法指令级融合,基于语义描述符及模态特征参数执行针对性存储优化,解决多模态数据统一存储与高效管理问题。
技术关键词
编码策略
数据存储单元
模态特征
多模态
格式
数据访问单元
语义
分块策略
数据分布特征
子模块
存储结构
索引策略
描述符
存储系统
场景切换检测
编码结构