← 返回列表

基于流式大数据技术的分布式农业数据存储管理方法

申请号: CN202410208228.3
申请人: 成都农业科技职业学院
申请日期: 2024/2/26

摘要文本

本发明涉及电子数字数据处理技术领域,具体涉及基于流式大数据技术的分布式农业数据存储管理方法,包括:对历史流式数据进行压缩,根据子串的长度以及被压缩的次数获得当前流式数据的初始字典长度,根据字符之间的距离、被压缩的次数、字符所属子串的长度以及子串之间的间隔获得字符的瞬时增量参数,根据历史流式数据被压缩的过程中,不同子串的间隔以及不同字符的瞬时增量参数获得字符所属字典增量参数;结合初始字典长度和字典增量参数对当前流式数据进行压缩存储。本发明提高了对流式数据进行动态压缩的适应性,更加适应了农业流式数据动态变化的特点,提高了对农业流式大数据的压缩效率。

专利详细信息

项目 内容
专利名称 基于流式大数据技术的分布式农业数据存储管理方法
专利类型 发明申请
申请号 CN202410208228.3
申请日 2024/2/26
公告号 CN117792403A
公开日 2024/3/29
IPC主分类号 H03M7/30
权利人 成都农业科技职业学院
发明人 向模军
地址 四川省成都市温江区德通桥路392号

专利主权项内容

1.基于流式大数据技术的分布式农业数据存储管理方法,其特征在于,该方法包括以下步骤:获取持续更新的流式数据,将更新前的流式数据记为历史流式数据,将最新一次更新得到的流式数据记为当前流式数据;将流式数据中连续字符形成序列记为子串,对历史流式数据进行压缩,根据子串的长度以及被压缩的次数获得当前流式数据的初始字典长度,根据当前流式数据中字符之间的距离、字符被压缩的次数、字符所属子串的长度以及子串之间的间隔获得字符的瞬时增量参数,所述子串的长度为子串中字符的数量;根据历史流式数据被压缩的过程中,字符所属的相同长度的不同子串之间的间隔以及不同字符之间的瞬时增量参数差异获得字符所属子串的字典增量参数;结合初始字典长度和字典增量参数对当前流式数据进行压缩存储。 马 克 数 据 网