版权所有:内蒙古大学图书馆 技术提供:维普资讯• 智图
内蒙古自治区呼和浩特市赛罕区大学西街235号 邮编: 010021
专利申请号:CN202211549429.7
公 开 号:CN115982436A
代 理 人:刘强
代理机构:广州天河万研知识产权代理事务所(普通合伙)
专利类型:发明专利
申 请 日:20230418
公 开 日:20221205
专利主分类号:G06F16/907
关 键 词:流数据 数据存储模块 压缩 大规模数据分析 读取 数据压缩模块 物联网数据 存储空间 读取模块 对流数据 高效检索 数据存储 数据类型 压缩系统 存储
摘 要:本发明公开了一种流数据的高效检索、压缩系统及方法,属于物联网数据技术领域,包括:流数据读取模块,用于读取流数据;数据解构模块,对流数据进行解构;数据压缩模块,将数据解构模块传来的数据根据数据类型进行压缩,并将压缩后的数据存储到数据存储模块;数据存储模块,用于存储压缩后的数据。本发明的有益效果是,根据ChunkSize选择的数值不同,节省流数据存储空间50%‑95%;提高大规模数据分析速度50%以上。