CN119396346A 用于磁盘空间管理的方法、装置、设备和存储介质 （京东科技信息技术有限公司）

开发区科创十一街18号院2号楼6层储空间使用信息至少指示数据库在对应的目标库对应的需求预测模型，基于存储空间使用信及基于存储空间使用信息和/或需求预测结果，包括针对目标磁盘中的日志文件和/或数据表空间碎片的清理操作、和/或针对数据库的磁盘空2获取数据库对应的存储空间使用信息，所述存储空间使用信息至少指基于所述存储空间使用信息和/或所述需求预测结果，执行对所述目标磁盘的磁盘优化操作，所述磁盘优化操作包括针对所述目标磁盘中的日志文件和/或数据表空间碎片的3.根据权利要求1所述的方法，其中基于所述空间使用信息和/或所述需求预测结果，响应于确定所述存储空间使用信息指示的所述存储空间占用率大于第一占用率阈值和/或确定所述目标磁盘的剩余存储空间小于所述需求预测结果指示的存储空间需求，执行针对所述日志文件和/或数据表空间碎片的清理操作和/或针对所述数据库的第一磁盘响应于确定所述空间使用信息指示的所述目标磁盘的空间占用率小于第二占用率阈获取所述数据库的数据表空间的统计信息，所述数据表空间的统基于所述数据表空间的统计信息，确定所述数据库中的各个数据表对应的空间碎片确定所述至少一个数据表中是否存在执行时间大于阈值时间的事务对应的数据和/或响应于确定至少一个数据表中不存在执行时间大于阈值时间的事务对应的数据和未37.根据权利要求3所述的方法，其中执行针对所述数据库的第一磁盘空间更新操作包响应于针对所述日志文件和/或数据表空间碎片的清理操作已被执行，确定所述数据库在所述目标磁盘中的存储空间占用率仍大于所述第一占用率阈值和/或所述目标磁盘的8.根据权利要求1所述的方法，其中执行所述针对所述数据库的磁盘空间更新操作包基于所述数据库对应的存储空间使用信息和所述需求预测结果，从所述目标磁盘对应的资源池中确定处于可分配状态基于所述数据库对应的存储空间需求，从所述处于可分配状态9.根据权利要求8所述的方法，其中基于所述目标服务器执行所述磁盘空间更新操作基于创建的数据库副本，执行数据库拓扑切换操作，以使所述创建对所述数据库拓扑切换操作前的所述数据库对应的拓扑节点执利用第一线程，在执行所述针对所述日志文件和/或数据表空间碎片的清理操作过程若确定所述性能指标数据超出预定的阈值，停止执行所述针对所述日志文件和/或数获取模块，被配置为获取数据库对应的存储空间使用信息，所需求预测模块，被配置为利用经训练的与所述数据库对应的所述目标磁盘的磁盘优化操作，所述磁盘优化操作包括针对所述目标磁盘中的日志文件4至少一个存储器，所述至少一个存储器被耦合到所述至少一个14.一种计算机程序产品，所述计算机程序产品被有形地存储在计算机存储介质中并且包括计算机可执行指令，计算机可执行指令在由设备执行时使设备执行根据权利要求156[0017]图3D示出了本公开的一些实施例的执行针对日志文件的清理操作的过程的示意[0018]图3E示出了本公开的一些实施例的执行针对表空间碎片的清理操作的过程的示[0019]图3F示出了本公开的一些实施例的执行针对数据库的磁盘空间更新操作的过程7中。为了满足这些需求，服务器往往使用高性能的硬件，例如固态硬盘(SolidState8[0037]图1示出了本公开的实施例能够在其中实现的示例环境100的示意图。在环境100[0041]图2示出了根据本公开的一些实施例的磁盘空间管理的过程200的流程图。过程占用量与磁盘容量的比率可以判断磁盘的使用紧[0049]如图3A所示，电子设备110可以通过利用各个数据库(统称为或单独称为数据库9级)获取数据库的数据库120的存储空间使用信息和其[0050]性能数据库采集器311是部署在每个数据库实例上的用来实时监控和收集数据库周期进行监控。这意味着电子设备110能够在极短的时间间隔内(例如每秒)检测数据库资[0062]在框324，电子设备110构建用于确定数据库120对应的需求预测结果的需求预测[0063]作为一个示例，电子设备110可以基于长短期记忆网络(LSTM,LongShort_Term[0064]在框325，电子设备110可以使用预处理后的数据对数据库120对应的需求预测模来时间段的存储需求进行预测。模型输出的预测值指示数据库120在未来特定时间段对目[0068]在一些实施例中，磁盘优化操作包括针对目标磁盘中的日志文件和/或数据表空定的阈值(磁盘空间水位线)和/或需求预测结果指示数据库120在未来特定时间段对目标占用率阈值和/或确定目标磁盘的剩余存储空间小于需求预测结果指示的存储空间需求，电子设备110执行针对日志文件和/或数据表空间碎片的清理操作和/或针对数据库的第一位线(第一占用率阈值)和/或目标磁盘水位线(第一占用率阈值)和/或目标磁盘的剩以对日志文件，例如主要包括二进制日志(Binlog)文件占用的磁盘空间进行分析。如果[0080]图3D示出了本公开的一些实施例的执行针对日志文件的清理操作的过程300D的[0085]在一些实施例中，Binlog文件记录了更改数据或可能更改数据的数据库查询语[0093]图3E示出了本公开的一些实施例的执行针对表空间碎片的清理操作的过程300E[0094]在框351，响应于确定数据库中存在至少一个数据表对应的空间碎片率大于碎片[0096]在一些实施例中，电子设备110确定至少一个数据表中是否存在执行时间大于阈值时间的事务对应的数据和/或未执行的备份操作对[0099]在框353，响应于确定至少一个数据表中不存在执行时间大于阈值时间的事务对[0104]在框334和框335，响应于针对日志文件和/或数据表空间碎片的清理操作已被执行，并且确定数据库在目标磁盘中的存储空间占用率仍大于第一占用率阈值和/或目标磁仍大于第一占用率阈值和/或预测的磁盘空间需求指示目标磁盘的剩余磁盘空间的可用时间小于时间阈值)，则电子设备110可以进一步执行第一磁盘空间更新操作(数据库扩容操[0107]图3F示出了本公开的一些实施例的执行针对数据库的磁盘空间更新操作的过程[0109]在一些实施例中，根据当前数据库的存储空间使用情况例如包括已用磁盘空间、断在当前情况下是否需要调整分配给数据库120的磁盘空间，以及具体需要分配多少存储[0110]作为一个示例，确定数据库120对应的存储空间需求还可以包括确定数据库当前[0111]作为另一个示例，电子设备110可以根据数据库对应的存储空间需求选择一个适[0114]在一些实施例中，电子设备110从目标磁盘对应的资源池中确定处于可分配状态[0119]作为一个示例，在标记为待使用的目标服务器上，电子设备110可以执行数据库120的部署和恢复操作，将其配置为与数据库120相同的拓扑结构并搭建与原有数据库120相同的数据库拓扑副本集。此过程确保新服务器能够与原数据库120同步，保持数据一致建的数据库副本作为新的拓扑节点接管数据库对应[0121]在一些实施例中，当新的数据库实例准备就绪后电子设备110可以执行数据库拓[0122]作为一个示例，电子设备110可以基于高性能数据库(High_performance[0123]HDB是一种高可用数据库解决方案。它不仅能够在数据库故障发生时自动将故障[0124]在一些实施例中，电子设备110对数据库拓扑切换操作前的数据库对应的拓扑节[0129]性能指标数据指示处理器和/或内存的利用率。性能指标数据提供了关于数据库[0135]图4示出了根据本公开一些实施例的用于磁盘空间管理的装置400的框图。装置盘优化操作，磁盘优化操作包括针对目标磁盘中的日志文件和/或数据表空间碎片的清理[0138]在一些实施例中，磁盘优化模块430被进一步配置为响应于确定存储空间使用信息指示的存储空间占用率大于第一占用率阈值和/或确定目标磁盘的剩余存储空间小于需[0139]在一些实施例中，磁盘优化模块430还被进一步配置为响应于确定空间使用信息[0140]在一些实施例中，磁盘优化模块430还被进一步配置为执行针对日志文件的清理[0141]在一些实施例中，磁盘优化模块430还被进一步配置为执行针对数据表空间碎片据和/或未执行的备份操作对应的数据；以及响应于确定至少一个数据表中不存在执行时一占用率阈值和/或目标磁盘的剩余磁盘空间仍小于磁盘空间需求，执行第一磁盘空间更[0143]在一些实施例中，磁盘优化模块430还被进一步配置为执行针对数据库的磁盘空[0144]在一些实施例中，磁盘优化模块430还被进一步配置为在目标服务器上创建数据[0149]电子设备500可以进一步包括另外的可拆卸/不可拆卸、易失性/非易失性存储介设备500与一个或多个其他电子设备通信的任何设备(例如，网卡、调制解调器等)进行通条或多条计算机指令，其中一条或多条计算机指令被处理器执行以实现上文描述的方法。据处理装置的处理单元执行时，