CN113946577B 对象归并方法及装置 （北京星辰天合科技股份有限公司）

发明解决了相关技术中的对象归并方法需要写2将所述目标对象写入多个归并对象中的一个在归并对象中的目标对象的总数据量达到第一预设数据量的情在所述归并对象的总数据量达到第二预设数据量的情况确定多个归并对象中处于空闲状态的归并对象，其中，所述空闲在所述空闲状态的归并对象为多个的情况下，随机选取的一在所述归并对象当前可写入的情况下，将所述目标对象其中，在所述缓存空间中的目标对象超过预设数量的情况根据所述归并对象中归并的目标对象的数据总量，所述目标对象在所述总数据量达到所述第二预设数据量的情况下，将所述归3在所述归并对象的总数据量达到第二预设数据量的情况下，对所述目标对象的元数据进行更新，并执行所述目标对象的更新元在归并中断后重新进入的情况下，扫描所述第一归并日志，确在归并中断后重新进入的情况下，扫描所述第二归并接收模块，用于接收数据量小于预设阈值的目标对象；其中，在第一归并模块，用于在归并对象中的目标对象的总数据量第二归并模块，用于在所述归并对象的总数据量达到第二预45文件写入到高度缓存池(SSD)中并记录日志，然后聚合一批小文件之后再读取出来组成一[0006]由于使用扫描日志的方式后台进行归并，如果前台IO量较大但后台归并又不及67员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范8[0035]步骤S108，在归并对象中的目标对象的总数据量达到第[0038]上述步骤的执行主体可以为具有归并功能的存储装置，例如服务器或者存储9骤S106至S108的执行主体可以为上述存储装置设置的用于执行归并动作的归并模块，因在为目标对象确定归并对象时，需要从多个归并对象中选择可以执行归并操作的归并对机选取的方式也可以通过上述按照顺序进行便利的方式选择归在缓存空间中的目标对象超过预设数量的情况下，归并对象处于不可缓存等待写入状态，[0056]在归并对象的总数据量达到第二预设数据量的情况下，将归并对象写入数据时(更新所有目标对象元数据耗时较多)不会阻塞其他目标对象进[0067]本实施方式提供了一种实时在线归并的方式来解决上述后台归并遇到的各种问[0073](5)归并模块首先记录一条的小对象的compact_log(也即创建一个新的归并对象时需要写入compact_big_log(第二归并日志)，用于异常情况归并数据时仍然接受后续小对象添加归并数据。如果已经有两个CHUNK(CHUNK2状态)等待下发收尾工作时(更新所有小对象元数据耗时较多)不会阻塞其他小对象[0085]由于小对象归并开始时记录了compact_log(第一归并日志)，完成归并元数据更[0086]未完成归并对象都会有compact_big_log(也即是上述第二归并日志)存在，所以根据这些log对这些未完成归并对象进行重新扫描处理，把其中已更新完元数据的小对象将目标对象写入归并对象，并在归并对象中的数据量达到第一预设数据量时写入数据池，标对象归并的效率的技术效果，进而解决了相关技术中的对象归并方法需要写入缓存池[0099]所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式