数据中心混合云存储方法、装置、计算机设备及存储介质与流程

文档序号:20698539发布日期:2020-05-12 15:20阅读:169来源:国知局
数据中心混合云存储方法、装置、计算机设备及存储介质与流程

本发明涉及云存储方法,更具体地说是指数据中心混合云存储方法、装置、计算机设备及存储介质。



背景技术:

云计算是当下发展最快的行业之一,数据中心云存储系统越来越被企业和个人接受。数据中心的云存储系统是一种采用大量分布式存储资源协同工作的方式来构建的大型集群应用系统,用于向用户提供安全可靠的网络存储服务。云存储系统是一种新兴的数据存储解决方案,其向终端用户提供的数据存储服务具有连接简单透明、使用灵活方便、存储更加可靠、维护费用低廉以及安全性高等诸多优点。

虽然目前云存储系统能为用户提供相对于本地存储方式更好的数据存储性能,但它面临着传输速率较低、传输时长较大及传输不稳定等数据传输方面的性能问题,随着未来终端用户在云端存储的数据量的增加,云存储系统在数据传输方面的性能缺陷将会变得更加明显,母爱前云存储方法不够灵活,单一的存储环境不能保证满足不同类型用户的需求,无法满足用户需要将数据迁移到其他存储环境的场景。

因此,有必要设计一种新的方法,实现多种存储方式,减少单一存储环境的使用限制,以提高数据传输效率,提升数据传输性能。



技术实现要素:

本发明的目的在于克服现有技术的缺陷,提供数据中心混合云存储方法、装置、计算机设备及存储介质。

为实现上述目的,本发明采用以下技术方案:数据中心混合云存储方法,包括:

获取来自终端的数据传输请求,以得到初始请求;

选取出空闲动态存储节点,以得到目标节点;

根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果;

判断所述传输结果是否是传输完毕;

若所述传输结果是传输完毕,则回收所述目标节点。

其进一步技术方案为:所述判断所述传输结果是否是传输完毕之后,还包括:

若所述传输结果不是传输完毕,则执行所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果。

其进一步技术方案为:所述获取来自终端的数据传输请求,以得到初始请求之前,还包括:

构建静态存储节点资源池以及动态存储节点资源池。

其进一步技术方案为:所述选取出空闲动态存储节点,以得到目标节点,包括:

从动态存储节点资源池选取标签为空闲的动态存储节点,并更改对应的动态存储节点为非空闲,以得到目标节点。

其进一步技术方案为:所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果,包括:

根据所述初始请求确定数据所在的静态存储节点,以得到待处理节点;

将待处理节点内的数据复制至动态存储节点,以形成动态数据;

构建目标节点与终端的数据传输链路,以得到目标传输链路;

将动态数据经过目标传输链路传输至终端,以得到传输结果。

其进一步技术方案为:所述静态存储节点资源池包括若干个用于存储数据的静态存储节点;所述动态存储节点资源池包括若干个用于保存静态存储节点复制而来的数据的动态存储节点。

其进一步技术方案为:所述回收所述目标节点,包括:

将所述目标节点的标签标记为空闲。

本发明还提供了数据中心混合云存储装置,包括:

请求获取单元,用于获取来自终端的数据传输请求,以得到初始请求;

节点选取单元,用于选取出空闲动态存储节点,以得到目标节点;

数据传输单元,用于根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果;

判断单元,用于判断所述传输结果是否是传输完毕;

回收单元,用于若所述传输结果是传输完毕,则回收所述目标节点。

本发明还提供了一种计算机设备,所述计算机设备包括存储器及处理器,所述存储器上存储有计算机程序,所述处理器执行所述计算机程序时实现上述的方法。

本发明还提供了一种存储介质,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时可实现上述的方法。

本发明与现有技术相比的有益效果是:本发明通过设定静态数据存储节点以及动态数据存储节点,将基础数据存放于静态数据存储节点内,根据初始请求将静态数据存储节点内的数据扩张至空闲的动态数据存储节点内,再由动态数据存储节点与终端的数据传输链路将数据传输至终端,以实现多种存储方式,减少单一存储环境的使用限制,以提高数据传输效率,提升数据传输性能。

下面结合附图和具体实施例对本发明作进一步描述。

附图说明

为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的数据中心混合云存储方法的应用场景示意图;

图2为本发明实施例提供的数据中心混合云存储方法的流程示意图;

图3为本发明实施例提供的数据中心混合云存储方法的子流程示意图;

图4为本发明另一实施例提供的数据中心混合云存储方法的流程示意图;

图5为本发明实施例提供的数据中心混合云存储装置的示意性框图;

图6为本发明实施例提供的数据中心混合云存储装置的数据传输单元的示意性框图;

图7为本发明另一实施例提供的数据中心混合云存储装置的示意性框图;

图8为本发明实施例提供的计算机设备的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解,在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解,在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。

请参阅图1和图2,图1为本发明实施例提供的数据中心混合云存储方法的应用场景示意图。图2为本发明实施例提供的数据中心混合云存储方法的示意性流程图。该数据中心混合云存储方法应用于服务器中。该服务器与终端进行数据交互,终端发起数据传输请求,由服务器将静态存储节点内的数据经过动态存储节点传输至终端,便于实现为用户建立大量传输链路的数据传输方式,即由大量存储节点来同时为用户提供数据传输服务,最终将会为终端用户提供非常高的数传输速率。

图2是本发明实施例提供的数据中心混合云存储方法的流程示意图。如图2所示,该方法包括以下步骤s110至s150。

s110、获取来自终端的数据传输请求,以得到初始请求。

在本实施例中,初始请求包括需要传输的数据类型以及存储的节点信息。

当终端对云存储系统的服务器中某些静态存储节点中保存的数据有传输请求时,服务器将会发出调度指令来指示进行动态存储节点的调用,以完成高传输效率的数据传输。

s120、选取出空闲动态存储节点,以得到目标节点。

在本实施例中,目标节点是指未被占用的动态存储节点。

每个动态存储节点都带有一个表示其是否为空闲状态的标签,以此判定其是否可进行调用。

具体地,从动态存储节点资源池选取标签为空闲的动态存储节点,并更改对应的动态存储节点为非空闲,以得到目标节点。

为了进一步提高为用户建立大量传输链路工作方式下的系统存储资源利用率,动态存储节点可在数据传输任务开始和结束时分别发出调度指令,以实现对动态数据存储节点的动态占用和归还,实现节点内的数据更新。通过采用这种对动态数据存储节点进行动态占用的工作方式,云存储系统将可实现对数据存储资源的重复利用。

动态存储节点保存数据传输过程中生成的动态数据,在实际工作过程中,服务器将通过发送系统调度命令的方式,来实现对动态存储节点的动态占用和归还,且通过对动态数据存储节点的动态调度,服务器将可实现对内部数据存储资源的重复利用,从而显著地提升为用户建立大量传输链路的高速数据传输方式中的存储资源利用效率。

s130、根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果。

在本实施例中,传输结果是指用于表述当前数据是否完全传输至终端且终端与服务器断开了数据传输的连接。

在一实施例中,请参阅图3,上述的步骤s130可包括步骤s131~s134。

s131、根据所述初始请求确定数据所在的静态存储节点,以得到待处理节点。

在本实施例中,待处理节点是指需要传输的数据所在的静态存储节点,具体地,可根据初始请求内携带的节点信息在静态存储节点资源池内进行遍历,以得到存储有该数据的静态存储节点。

在基本云存储系统中,数据存储节点内存储的数据内容在除数据丢失和恢复等特殊情况外是不会发生改变的,将此种类型的数据存储节点称作静态存储节点。静态存储节点用于保存实现存储可靠性的基本数据,在实际工作过程中,静态存储节点可采用与基本云存储系统中存储节点相似的存储方式,比如多重复制备份和差错控制编码,来保证系统数据存储的可靠性。

s132、将待处理节点内的数据复制至动态存储节点,以形成动态数据。

在本实施例中,动态数据是指将需要传输的数据传输至动态存储节点,暂存于动态存储节点内的数据。

将静态存储节点中存储的数据采用复制的方式迁移到选取出的各个动态存储节点中,这种将数据由静态节点向大量动态节点进行复制迁移的过程,可称为云存储系统的数据大规模扩张过程。

s133、构建目标节点与终端的数据传输链路,以得到目标传输链路。

在本实施例中,目标传输链路是指目标节点与终端的传输通道。

在完成数据信息的扩张过程后,这些目标节点将被作为数据传输节点与终端用户建立大量数据传输链路,并同时向终端用户传送动态数据。

s134、将动态数据经过目标传输链路传输至终端,以得到传输结果。

当用户收集完所需的数据并断开与服务器的传输连接时,服务器将会发出传输结束指令指示实现被占用动态存储节点的回收过程。此时,被占用的动态数据存储节点将被重新回收至动态存储节点资源池中,并等待被重新调用

服务器对整体云存储系统的控制和管理工作,和基本云存储系统中的中央控制器节点一样,其将完成用户身份的验证以及为用户分配存储空间等工作。另外,服务器还具有执行动态存储节点的调度,以实现为终端用户建立大量数据传输链路的工作任务。

s140、判断所述传输结果是否是传输完毕。

判断传输结果是否是传输完毕的标准是需要传输的数据完全传输至终端且终端与服务器断开连接。

s150、若所述传输结果是传输完毕,则回收所述目标节点。

在本实施例中,将所述目标节点的标签标记为空闲,以达到回收目标节点的目的。

若所述传输结果不是传输完毕,则执行所述步骤s130。

上述的数据中心混合云存储方法,通过设定静态数据存储节点以及动态数据存储节点,将基础数据存放于静态数据存储节点内,根据初始请求将静态数据存储节点内的数据扩张至空闲的动态数据存储节点内,再由动态数据存储节点与终端的数据传输链路将数据传输至终端,以实现多种存储方式,减少单一存储环境的使用限制,以提高数据传输效率,提升数据传输性能。

图4是本发明另一实施例提供的一种数据中心混合云存储方法的流程示意图。如图4所示,本实施例的数据中心混合云存储方法包括步骤s210-s260。其中步骤s220-s260与上述实施例中的步骤s110-s150类似,在此不再赘述。下面详细说明本实施例中所增加的步骤s210。

s210、构建静态存储节点资源池以及动态存储节点资源池。

在本实施例中,所述静态存储节点资源池包括若干个用于存储数据的静态存储节点;所述动态存储节点资源池包括若干个用于保存静态存储节点复制而来的数据的动态存储节点。

通过静态存储节点资源池以及动态存储节点资源池的协同工作,云存储系统将可以实现在有限的存储资源条件下获得更好的数据传输性能。

图5是本发明实施例提供的一种数据中心混合云存储装置300的示意性框图。如图5所示,对应于以上数据中心混合云存储方法,本发明还提供一种数据中心混合云存储装置300。该数据中心混合云存储装置300包括用于执行上述数据中心混合云存储方法的单元,该装置可以被配置于服务器中。具体地,请参阅图5,该数据中心混合云存储装置300包括请求获取单元302、节点选取单元303、数据传输单元304、判断单元305以及回收单元306。

请求获取单元302,用于获取来自终端的数据传输请求,以得到初始请求;节点选取单元303,用于选取出空闲动态存储节点,以得到目标节点;数据传输单元304,用于根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果;判断单元305,用于判断所述传输结果是否是传输完毕;回收单元306,用于若所述传输结果是传输完毕,则回收所述目标节点。

具体地,上述的节点选取单元303,用于从动态存储节点资源池选取标签为空闲的动态存储节点,并更改对应的动态存储节点为非空闲,以得到目标节点。

上述的回收单元306,用于将所述目标节点的标签标记为空闲。

在一实施例中,如图6所示,所述数据传输单元304包括节点确定子单元3041、复制子单元3042、链路构建子单元3043以及动态数据传输子单元3044。

节点确定子单元3041,用于根据所述初始请求确定数据所在的静态存储节点,以得到待处理节点;复制子单元3042,用于将待处理节点内的数据复制至动态存储节点,以形成动态数据;链路构建子单元3043,用于构建目标节点与终端的数据传输链路,以得到目标传输链路;动态数据传输子单元3044,用于将动态数据经过目标传输链路传输至终端,以得到传输结果。

图7是本发明另一实施例提供的一种数据中心混合云存储装置300的示意性框图。如图7所示,本实施例的数据中心混合云存储装置300是上述实施例的基础上增加了资源池构建单元301。

资源池构建单元301,用于构建静态存储节点资源池以及动态存储节点资源池。

需要说明的是,所属领域的技术人员可以清楚地了解到,上述数据中心混合云存储装置300和各单元的具体实现过程,可以参考前述方法实施例中的相应描述,为了描述的方便和简洁,在此不再赘述。

上述数据中心混合云存储装置300可以实现为一种计算机程序的形式,该计算机程序可以在如图8所示的计算机设备上运行。

请参阅图8,图8是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备500是服务器,服务器可以是独立的服务器,也可以是多个服务器组成的服务器集群。

参阅图8,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括非易失性存储介质503和内存储器504。

该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032包括程序指令,该程序指令被执行时,可使得处理器502执行一种数据中心混合云存储方法。

该处理器502用于提供计算和控制能力,以支撑整个计算机设备500的运行。

该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行一种数据中心混合云存储方法。

该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解,图8中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。

其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现如下步骤:

获取来自终端的数据传输请求,以得到初始请求;选取出空闲动态存储节点,以得到目标节点;根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果;判断所述传输结果是否是传输完毕;若所述传输结果是传输完毕,则回收所述目标节点。

在一实施例中,处理器502在实现所述判断所述传输结果是否是传输完毕步骤之后,还实现如下步骤:

若所述传输结果不是传输完毕,则执行所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果。

在一实施例中,处理器502在实现所述获取来自终端的数据传输请求,以得到初始请求步骤之前,还实现如下步骤:

构建静态存储节点资源池以及动态存储节点资源池。

其中,所述静态存储节点资源池包括若干个用于存储数据的静态存储节点;所述动态存储节点资源池包括若干个用于保存静态存储节点复制而来的数据的动态存储节点。

在一实施例中,处理器502在实现所述选取出空闲动态存储节点,以得到目标节点步骤时,具体实现如下步骤:

从动态存储节点资源池选取标签为空闲的动态存储节点,并更改对应的动态存储节点为非空闲,以得到目标节点。

在一实施例中,处理器502在实现所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果步骤时,具体实现如下步骤:

根据所述初始请求确定数据所在的静态存储节点,以得到待处理节点;将待处理节点内的数据复制至动态存储节点,以形成动态数据;构建目标节点与终端的数据传输链路,以得到目标传输链路;将动态数据经过目标传输链路传输至终端,以得到传输结果。

在一实施例中,处理器502在实现所述回收所述目标节点步骤时,具体实现如下步骤:

将所述目标节点的标签标记为空闲。

应当理解,在本申请实施例中,处理器502可以是中央处理单元(centralprocessingunit,cpu),该处理器502还可以是其他通用处理器、数字信号处理器(digitalsignalprocessor,dsp)、专用集成电路(applicationspecificintegratedcircuit,asic)、现成可编程门阵列(field-programmablegatearray,fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成。该计算机程序包括程序指令,计算机程序可存储于一存储介质中,该存储介质为计算机可读存储介质。该程序指令被该计算机系统中的至少一个处理器执行,以实现上述方法的实施例的流程步骤。

因此,本发明还提供一种存储介质。该存储介质可以为计算机可读存储介质。该存储介质存储有计算机程序,其中该计算机程序被处理器执行时使处理器执行如下步骤:

获取来自终端的数据传输请求,以得到初始请求;选取出空闲动态存储节点,以得到目标节点;根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果;判断所述传输结果是否是传输完毕;若所述传输结果是传输完毕,则回收所述目标节点。

在一实施例中,所述处理器在执行所述计算机程序而实现所述判断所述传输结果是否是传输完毕步骤之后,还实现如下步骤:

若所述传输结果不是传输完毕,则执行所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果。

在一实施例中,所述处理器在执行所述计算机程序而实现所述获取来自终端的数据传输请求,以得到初始请求步骤之前,还实现如下步骤:

构建静态存储节点资源池以及动态存储节点资源池。

其中,所述静态存储节点资源池包括若干个用于存储数据的静态存储节点;所述动态存储节点资源池包括若干个用于保存静态存储节点复制而来的数据的动态存储节点。

在一实施例中,所述处理器在执行所述计算机程序而实现所述选取出空闲动态存储节点,以得到目标节点步骤时,具体实现如下步骤:

从动态存储节点资源池选取标签为空闲的动态存储节点,并更改对应的动态存储节点为非空闲,以得到目标节点。

在一实施例中,所述处理器在执行所述计算机程序而实现所述根据所述初始请求将静态存储节点中的数据通过目标节点传输至终端,以得到传输结果步骤时,具体实现如下步骤:

根据所述初始请求确定数据所在的静态存储节点,以得到待处理节点;将待处理节点内的数据复制至动态存储节点,以形成动态数据;构建目标节点与终端的数据传输链路,以得到目标传输链路;将动态数据经过目标传输链路传输至终端,以得到传输结果。

在一实施例中,所述处理器在执行所述计算机程序而实现所述回收所述目标节点步骤时,具体实现如下步骤:

将所述目标节点的标签标记为空闲。

所述存储介质可以是u盘、移动硬盘、只读存储器(read-onlymemory,rom)、磁碟或者光盘等各种可以存储程序代码的计算机可读存储介质。

本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。

在本发明所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的。例如,各个单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。

本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本发明实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。

该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,终端,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1