基于分布式存储系统的网络流量控制方法、装置及设备与流程

本公开实施例涉及分布式存储，尤其涉及一种基于分布式存储系统的网络流量控制方法、装置及设备。

背景技术：

1、分布式存储系统包括多个数据服务器，为了提高分布式存储系统的容灾能力，往往要求数据以多副本形式存储在多个数据服务器上。这就涉及到数据服务器与数据服务器之间的数据传输。但是，在业务高峰时，数据服务器与数据服务器之间的网络带宽资源往往比较紧张，这就需要对数据传输的网络带宽进行合理限制。

2、相关技术中，在业务高峰时，可以先获取某一客户端的ip(internet protocoladdress，ip地址)。然后，获取该客户端的ip对应的优先级。若该客户端ip对应的优先级较高，则提高数据服务器与数据服务器之间的网络带宽，优先存储该客户端ip对应的数据。

3、然而，发明人发现现有技术至少存在如下技术问题：同一客户端的数据并非都是需要加急处理的数据，因此，通过客户端的ip对应的优先级，控制流量带宽的准确性较低。

技术实现思路

1、本公开实施例提供一种基于分布式存储系统的网络流量控制方法、装置及设备，可以提高控制流量带宽的准确性。

2、第一方面，本公开实施例提供一种基于分布式存储系统的网络流量控制方法，应用于分布式存储系统，所述分布式存储系统包括多个数据服务器；所述方法包括：

3、响应于分布式存储系统中的第一数据服务器接收到目标数据的传输请求，获取用于传输所述目标数据的传输链路，其中所述传输请求携带所述目标数据所属的业务类型的优先级信息；

4、通过所述第一数据服务器根据所述目标数据所属的业务类型的优先级信息，为所述传输链路配置第一优先级参数，其中所述第一优先级参数表示所述传输链路在传输层的优先级；

5、响应于通过所述传输链路传输所述目标数据，通过所述第一数据服务器根据所述传输链路的第一优先级参数，为所述目标数据配置第二优先级参数，以使数据传输设备根据所述第二优先级参数，向所述目标数据分配网络带宽，其中所述第二优先级参数表示所述目标数据在网络层的优先级，其中所述数据传输设备位于所述传输链路上，用于转发所述传输链路传输的所述目标数据。

6、第二方面，本公开实施例提供一种基于分布式存储系统的网络流量控制装置，应用于分布式存储系统，所述分布式存储系统包括多个数据服务器；所述装置包括：

7、获取模块，用于响应于分布式存储系统中的第一数据服务器接收到目标数据的传输请求，获取用于传输所述目标数据的传输链路，其中所述传输请求携带所述目标数据所属的业务类型的优先级信息；

8、配置模块，用于通过所述第一数据服务器根据所述目标数据所属的业务类型的优先级信息，为所述传输链路配置第一优先级参数，其中所述第一优先级参数表示所述传输链路在传输层的优先级；

9、传输模块，用于响应于通过所述传输链路传输所述目标数据，通过所述第一数据服务器根据所述传输链路的第一优先级参数，为所述目标数据配置第二优先级参数，以使数据传输设备根据所述第二优先级参数，向所述目标数据分配网络带宽，其中所述第二优先级参数表示所述目标数据在网络层的优先级，其中所述数据传输设备位于所述传输链路上，用于转发所述传输链路传输的所述目标数据。

10、第三方面，本公开实施例提供一种电子设备，包括：

11、处理器，以及与所述处理器通信连接的存储器；

12、所述存储器存储计算机执行指令；

13、所述处理器执行所述存储器存储的计算机执行指令，以实现如上第一方面所述的基于分布式存储系统的网络流量控制方法。

14、第四方面，本公开实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一方面所述的基于分布式存储系统的网络流量控制方法。

15、第五方面，本公开实施例提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现如上第一方面所述的基于分布式存储系统的网络流量控制方法。

16、本实施例提供的基于分布式存储系统的网络流量控制方法、装置及设备，该方法包括：响应于分布式存储系统中的第一数据服务器接收到目标数据的传输请求，获取用于传输目标数据的传输链路，其中传输请求携带目标数据所属的业务类型的优先级信息；通过第一数据服务器根据目标数据所属的业务类型的优先级信息，为传输链路配置第一优先级参数，其中第一优先级参数表示传输链路在传输层的优先级；响应于通过传输链路传输目标数据，通过第一数据服务器根据传输链路的第一优先级参数，为目标数据配置第二优先级参数，以使数据传输设备根据第二优先级参数，向目标数据分配网络带宽，其中第二优先级参数表示目标数据在网络层的优先级，其中数据传输设备位于传输链路上，用于转发传输链路传输的目标数据。在本申请实施例中，由于可以根据自身业务的优先级给不同的流量配置第一优先级参数，在传输数据时，将第一优先级参数转化为网络层的第二优先级参数，这样，交换机可以根据网络层的第二优先级参数为目标数据分配对应的网络带宽，从而实现了根据业务类型对数据传输的优先级进行控制，实现了更细粒度的流量优先级控制，因此提高了控制流量带宽的准确性。

技术特征：

1.一种基于分布式存储系统的网络流量控制方法，其特征在于，应用于分布式存储系统，所述分布式存储系统包括多个数据服务器；所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述分布式存储系统中还包括客户端和元数据服务器，其中所述客户端用于向所述第一数据服务器发送所述目标数据的传输请求；所述元数据服务器内存储有业务类型的存储目录与优先级信息之间的对应关系；

3.根据权利要求1所述的方法，其特征在于，所述第一数据服务器上安装有优先级配置进程和数据传输进程；

4.根据权利要求3所述的方法，其特征在于，所述通过执行所述优先级配置进程，根据所述目标数据所属的业务类型的优先级信息，为所述传输链路配置第一优先级参数，包括：

5.根据权利要求1所述的方法，其特征在于，所述通过所述第一数据服务器根据所述传输链路的第一优先级参数，为所述目标数据配置第二优先级参数，包括：

6.根据权利要求1所述的方法，其特征在于，所述传输请求包括写入请求，所述写入请求携带待写入目标数据的第二数据服务器的地址信息；

7.根据权利要求1所述的方法，其特征在于，所述分布式存储系统中还包括客户端和元数据服务器，其中所述客户端用于向所述第一数据服务器发送所述目标数据的读取请求；所述元数据服务器内存储有数据服务器的标识信息与数据服务器的地址信息之间的对应关系；

8.根据权利要求1至7任一项所述的方法，其特征在于，所述多个数据服务器位于多个机房，每个机房内部署有至少一个数据服务器；所述分布式存储系统还包括数据传输设备，其中，一个机房内的数据服务器通过所述数据传输设备与另一个机房内的数据服务器进行数据传输。

9.根据权利要求1至7任一项所述的方法，其特征在于，所述数据传输设备内存储有优先级参数与网络带宽之间的对应关系；

10.一种基于分布式存储系统的网络流量控制装置，其特征在于，应用于分布式存储系统，所述分布式存储系统包括多个数据服务器；所述装置包括：

11.一种电子设备，其特征在于，包括：处理器，以及与所述处理器通信连接的存储器；

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如权利要求1至9任一项所述的基于分布式存储系统的网络流量控制方法。

13.一种计算机程序产品，其特征在于，包括计算机程序，该计算机程序被处理器执行时实现如权利要求1至9任一项所述的基于分布式存储系统的网络流量控制方法。

技术总结
本公开实施例提供一种基于分布式存储系统的网络流量控制方法、装置及设备，该方法包括：响应于分布式存储系统中的第一数据服务器接收到目标数据的传输请求，获取用于传输目标数据的传输链路，其中传输请求携带目标数据所属的业务类型的优先级信息；根据目标数据所属的业务类型的优先级信息，为传输链路配置第一优先级参数，其中第一优先级参数表示传输链路在传输层的优先级；响应于通过传输链路传输目标数据，根据传输链路的第一优先级参数，为目标数据配置第二优先级参数，以使数据传输设备根据第二优先级参数，向目标数据分配网络带宽，其中第二优先级参数表示目标数据在网络层的优先级。本申请可以提高控制流量带宽的准确性。

技术研发人员：张少愚,陈浴辉,缪一航,曹睿东,王涛,赵李洋
受保护的技术使用者：北京火山引擎科技有限公司
技术研发日：
技术公布日：2024/2/19