CN111817722B 数据压缩方法、装置及计算机设备 (北京奥星贝斯科技有限公司)_第1页
CN111817722B 数据压缩方法、装置及计算机设备 (北京奥星贝斯科技有限公司)_第2页
CN111817722B 数据压缩方法、装置及计算机设备 (北京奥星贝斯科技有限公司)_第3页
CN111817722B 数据压缩方法、装置及计算机设备 (北京奥星贝斯科技有限公司)_第4页
CN111817722B 数据压缩方法、装置及计算机设备 (北京奥星贝斯科技有限公司)_第5页
已阅读5页,还剩27页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

查找推荐记录中是否存在满足压缩率条件的推编码流程获取多个压缩编码规则对所述待压缩2获取所述待压缩数据单元的访问需求信息,所述访问需求信息通所述推荐记录用于记录:同列历史压缩数据单元所使用过的压缩编所述压缩率条件包括:推荐压缩编码规则的置信度高于设定阈值,且若存在,则利用所述推荐压缩编码规则对所述待压缩数据单后基于实际压缩率是否匹配所述访问需求信息调整所述推荐压缩编码规则的所述置信度,若不存在,则基于所述访问需求信息从多个压缩编码规则中选取出目标在所述数据表完成压缩存储后,根据所述推荐记录对所述数据3.根据权利要求1所述的方法,所述待压缩数据单元的访问需求信息通过获取所述待压缩数据单元和/或所述历史压缩数据单元的历史获取所述待压缩数据单元的访问需求信息,所述访问需求信息通所述推荐记录用于记录:同列历史压缩数据单元所使用过的压缩编所述压缩率条件包括:推荐压缩编码规则的置信度高于设定阈值,且若存在,则利用所述推荐压缩编码规则对所述待压缩数据单后基于实际压缩率是否匹配所述访问需求信息调整所述推荐压缩编码规则的所述置信度,若不存在,则基于所述访问需求信息从多个压缩编码规则中选取出目标345[0018]所述压缩率条件包括:推荐压缩编码规则的压缩率信息与所述访问需求信息匹[0021]可选的,所述待压缩对象的访问需求通过获取所述待压缩对象和/或所述历史压[0027]在所述待压缩对象所使用的压缩编码规则是推荐记录中记录的推荐压缩编码规[0028]在所述待压缩对象所使用的压缩编码规则不同于推荐记录中记录的推荐压缩编中的推荐压缩编码规则替换为所述待压缩对象所使用的压缩编码6[0041]图3是本说明书根据一示例性实施例示出的一种数据压缩装置所在计算机设备的指并包含一个或多个相关联的列出项目的任何或所为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或7据库具备了基于编码数据直接查询的能力。尤其对于LSM_Tree(TheLog_Structured8[0060]在首次压缩完成后,基于所述待压缩对象Data_A1所使用的压缩编码规则对所述推荐记录中记录有压缩Data_A1的压缩编码规则及对应的压缩率信息,可以根据压缩率条9务中可能出现由于Data_A1插入新数据导致Data_A2可能不适用于原有Data_A1的压缩编码述Data_A2所使用的压缩编码规则对所述推荐记录进行更新。例如,将推荐记录更新为因此启动常规压缩编码流程,可以获取多个压缩编码规则对所述待压缩对象的预估压缩缩table_c1的压缩编码规则及对应的压缩率信息,可以根据压缩率条件确定是否选取现更新后需要压缩时,可以基于数据表中同一列的历史压缩数据的压缩编码规则进行压需求信息以及所述待压缩对象所使用的压缩编码规则对所述推荐记录进行更新。作为例缩编码规则的压缩率信息采用置信度实现,该置信度表征压缩编码规则的实际压缩率高基于所述实际压缩率及所述访问需求对所述推荐记录中压缩编码规则及对应的压缩率信则替换为所述待压缩对象所使用的压缩编码规则。[0082]数据写入流程为:一个数据写入操作来了,首先追加到写前日志(WriteAhead访问数据可以快速确定数据表的访问需求,例如根据历史访问的操作类型及历史访问频规则。[0092]在数据单元完成整体压缩之后,基于每个数据列的实际压缩率信息更新推荐记[0093]在所述待压缩对象所使用的压缩编码规则是推荐记录中记录的推荐压缩编码规[0094]在所述待压缩对象所使用的压缩编码规则不同于推荐记录中记录的推荐压缩编中的推荐压缩编码规则替换为所述待压缩对象所使用的压缩编码[0095]针对数据表副本的压缩过程,可以直接利用相同数据的主数据表的压缩编码规分利用了更多的历史上下文信息来即时调整推荐记录中的压的检测开销。明书数据压缩装置所在计算机设备的一种硬件结构图,除了图3所示的处理器310、内存[0103]如图4所示,图4是本说明书根据一示例性实施例示出的一种数据压缩装置的框估压缩率选取目标压缩编码规则,利用所述目标压缩编码规则对所述待压缩对象进行压述待压缩对象所使用的压缩编码规则对所述推荐记录[0120]可选的,所述待压缩对象的访问需求通过获取所述待压缩对象和/或所述历史压[0126]在所述待压缩对象所使用的压缩编码规则是推荐记录中记录的推荐压缩编码规[0127]在所述待压缩对象所使用的压缩编码规则不同于推荐记录中记录的推荐压缩编中的推荐压缩编码规则替换为所述待压缩对象所使用的压缩编码[0129]上述数据压缩装置中各个模块的功能和作用的实现过程具体详见上述数据压缩[0131]上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围用途或者

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论