分布式存储中自动更新配置的方法及系统与流程

本发明涉及分布式存储，尤其是涉及一种分布式存储中自动更新配置的方法及系统。

背景技术：

1、分布式存储系统是一种将数据分布在多个位置的系统，以提高可用性、性能和容量。分布式存储系统通常包括多个存储节点，它们协同工作来存储和管理大量数据。针对分布式存储系统，配置管理是一个关键方面，其中，配置包括硬件参数、数据分布策略、数据备份策略、访问控制和性能调整参数，有效的配置管理可以提高系统的稳定性和性能。目前，在大规模分布式存储系统中，通常是管理员手动配置管理，效率低且容易出错，从而导致系统运行存在风险。

技术实现思路

1、有鉴于此，本发明的目的在于提供一种分布式存储中自动更新配置的方法及系统，以提高了系统配置效率，减少了配置错误，同时降低了系统运行风险。

2、为了实现上述目的，本发明实施例采用的技术方案如下：

3、第一方面，本发明实施例提供了一种分布式存储中自动更新配置的方法，包括：获取分布式存储系统的指标数据，并基于指标数据监控分布式存储系统的状态和性能；当监测到分布式存储系统发生异常时，基于预先制定的预警规则进行自动预警；当监测到分布式存储系统的状态发生变化时，实时更新或者修改分布式存储系统的配置参数。

4、在一种实施方式中，当监测到分布式存储系统的状态发生变化时，实时更新或者修改分布式存储系统的配置参数，包括：当监测到分布式存储系新增存储模块时，获取已有存储模块的全局配置，并将全局配置下发至新增存储模块以及更新已有存储模块的节点同步信息；当监测到分布式存储系移除存储模块时，删除移除存储模块的全局配置，并更新已有存储模块的节点同步信息。

5、在一种实施方式中，实时更新或者修改分布式存储系统的配置参数之后，上述方法还包括：获取分布式存储系统中每个存储模块的状态和性能；如果存储模块的状态和性能正常，则按照存储模块的顺序，依次重启存储模块；如果存储模块的状态和性能异常，则将存储模块调整至更新之前的配置。

6、在一种实施方式中，依次重启存储模块之后，上述方法还包括：基于存储模块的数据块进行数据同步，并基于存储模块的负载进行负载均衡。

7、在一种实施方式中，基于存储模块的数据块进行数据同步，包括：当移除存储模块时，确定移除存储模块中丢失数据块的备份数据块对应的第一存储模块，并从第一存储模块中复制丢失数据块至目标存储模块中；当新增存储模块时，确定新增存储模块中新增数据块的备份数据块对应的第二存储模块，并从第二存储模块中复制新增数据块至新增存储模块中。

8、在一种实施方式中，从第一存储模块中复制丢失数据块至目标存储模块中，包括：获取未被移除的存储模块的存储水位；如果存储水位最低的两个存储模块的水位差小于临界值，则将存储水位最低的两个存储模块确定为目标存储模块，并将丢失数据块均匀的复制至两个目标存储模块中；如果存储水位最低的两个存储模块的水位差大于临界值，则将存储水位最低的存储模块确定为目标存储模块，并将丢失数据块复制至目标存储模块中。

9、在一种实施方式中，基于存储模块的负载进行负载均衡，包括：当新增存储模块时，如果已有存储模块的存储水位的最大值与新增存储模块的存储水位的差值大于预先设定的负载参数，则进行负载均衡；当移除存储模块时，如果已有存储模块的存储水位的最大值与已有存储模块的存储水位的最小值的差值大于负载参数，则进行负载均衡。

10、在一种实施方式中，上述方法还包括：响应于用户的手动操作，获取分布式存储系统的全局配置；对用户进行安全校验，如果安全校验通过，则基于用户的手动操作调整分布式存储系统的全局配置。

11、在一种实施方式中，获取分布式存储系统的指标数据之后，上述方法还包括：基于指标数据进行数据分析生成风险模型，并基于风险模型得到决策结果。

12、第二方面，本发明实施例提供了一种分布式存储中自动更新配置的系统，包括：监控管理模块，用于获取分布式存储系统的指标数据，并基于指标数据监控分布式存储系统的状态和性能；智能预警模块，用于当监测到分布式存储系统发生异常时，基于预先制定的预警规则进行自动预警；实时配置更新模块，用于当监测到分布式存储系统的状态发生变化时，实时更新或者修改分布式存储系统的配置参数。

13、本发明实施例带来了以下有益效果：

14、本发明实施例提供的上述分布式存储中自动更新配置的方法及系统，首先获取分布式存储系统的指标数据，并基于指标数据监控分布式存储系统的状态和性能；当监测到分布式存储系统发生异常时，基于预先制定的预警规则进行自动预警；当监测到分布式存储系统的状态发生变化时，实时更新或者修改分布式存储系统的配置参数。上述方法能够实时监测分布式存储系统的状态和性能，并且能够自动更新或者修改分布式存储系统的配置参数，提高了系统配置效率，减少配置错误和操作错误，以降低系统运行风险；同时，上述方法能够在分布式存储系统发生异常时自动预警，从而有助于及时发现潜在问题并采取预防措施，从而降低数据损失和服务中断的风险，提高系统的可靠性。

15、本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

16、为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

技术特征：

1.一种分布式存储中自动更新配置的方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，当监测到所述分布式存储系统的状态发生变化时，实时更新或者修改所述分布式存储系统的配置参数，包括：

3.根据权利要求2所述的方法，其特征在于，实时更新或者修改所述分布式存储系统的配置参数之后，所述方法还包括：

4.根据权利要求3所述的方法，其特征在于，依次重启所述存储模块之后，所述方法还包括：

5.根据权利要求4所述的方法，其特征在于，基于所述存储模块的数据块进行数据同步，包括：

6.根据权利要求5所述的方法，其特征在于，从所述第一存储模块中复制所述丢失数据块至目标存储模块中，包括：

7.根据权利要求4所述的方法，其特征在于，基于所述存储模块的负载进行负载均衡，包括：

8.根据权利要求1所述的方法，其特征在于，所述方法还包括：

9.根据权利要求1所述的方法，其特征在于，获取分布式存储系统的指标数据之后，所述方法还包括：

10.一种分布式存储中自动更新配置的系统，其特征在于，包括：

技术总结
本发明提供了一种分布式存储中自动更新配置的方法及系统，包括：获取分布式存储系统的指标数据，并基于指标数据监控分布式存储系统的状态和性能；当监测到分布式存储系统发生异常时，基于预先制定的预警规则进行自动预警；当监测到分布式存储系统的状态发生变化时，实时更新或者修改分布式存储系统的配置参数。本发明提高了系统配置效率，减少了配置错误，同时降低了系统运行风险。

技术研发人员：武晨阳,陆思锐,于达,吕向东,刘贺
受保护的技术使用者：中电信数字城市科技有限公司
技术研发日：
技术公布日：2024/3/27