基于网络状态不佳、大数据量系统迁移的方法及存储设备与流程

本发明涉及数据转移技术领域，具体地说，是基于网络状态不佳、大数据量系统迁移的方法及存储设备。

背景技术：

随着云计算的快速发展，越来越多的企业将业务迁移到了公有云或私有云平台上，或为了业务系统安全和稳定，将公有云的主机容灾备份到私有云中，或是将一个公有云的主机容灾备份到另一个公有云上。无论是哪种情况，都涉及到数据的迁移。当用户迁移时，源系统首次全量数据巨大，异地传输超过网络传输条件承载力时，如何保证数据的完整性和安全性，以及业务的连续性，是许多企业面临的问题。现有的迁移技术，需要长时间暂停业务，以人力为主在云平台创建虚拟机，安装应用，拷贝数据等等操作，而且操作繁琐，对于软件、硬件不同层次采取不同的方案，从而无法保证数据的完整性和安全性，以及业务的连续性。

即使有些公/私有云厂商提供了迁移方案，也都是针对该厂商自己的云平台来让用户迁移上云。用户一旦迁到云上，在使用过程中发现一些问题，再想迁回到原虚拟化环境或是其他的公/私有云，会很难实现。各公/私有云平台使用的虚拟化技术不同，底层使用的硬件存储资源不同，会导致主机驱动无法适配，针对不同厂商的存储分别进行特殊化拷贝。

中国专利文献cn201710536709.7，申请日20170704，专利名称为：一种数据迁移方法及存储设备，公开了一种数据迁移方法及存储设备，该方法应用于存储设备，所述存储设备包括源lun存储单元，可包括：在接收到数据迁移指令后，将源lun存储单元中的数据依次迁移至目标lun存储单元；实时统计所述源lun存储单元中的已迁移空间的物理容量，若统计得到的该物理容量大于等于预设的容量阈值，则释放该已迁移空间；在数据迁移完成后，执行源lun存储单元切换操作，以使所述目标lun存储单元代替源lun存储单元进行相应的业务处理；其中，在数据迁移过程中收到的io请求由源lun存储单元或者目标lun存储单元进行处理。

上述专利文献的数据迁移方法及存储设备，数据迁移方法及存储设备，但是，关于一种可达到源系统不停，线下客户端无需安装管理服务器就能解决大数据量系统上云的效果，克服大规模数据上云的常见挑战，降低数据迁移成本的技术方案则没有公开。

综上所述，需要一种可达到源系统不停，线下客户端无需安装管理服务器就能解决大数据量系统上云的效果，克服大规模数据上云的常见挑战，降低数据迁移成本的方法及存储设备，而关于这种方法及存储设备目前还未见报道。

技术实现要素：

本发明的目的是针对现有技术中的不足，提供一种可达到源系统不停，线下客户端无需安装管理服务器就能解决大数据量系统上云的效果，克服大规模数据上云的常见挑战，降低数据迁移成本的方法。

为实现上述目的，本发明采用的技术方案是：

基于网络状态不佳、大数据量系统迁移的方法，所述的方法为将一台有海量数据的源主机通过可移动的san存储设备motiongear,以物理运输的方式，迁移到云平台；具体包括以下步骤：

步骤s1：在源主机上安装代理软件agent，被迁移软件管理；

步骤s2：将数据全对象拷贝至可移动的san存储设备motiongear中；

步骤s3：在目标平台上启动一台虚拟机，安装迁移软件hypergate；

步骤s4：迁移软件hypermotion从目标平台的存储中获取一块空白卷挂给san存储设备motiongear；

步骤s5：将可移动的san存储设备motiongear中的源主机块级别的数据拷贝至目标平台的空白卷中；

步骤s6：数据拷贝完成后，在迁移软件hypermotion中执行迁移操作，该操作会将对应的目标平台的卷做成快照，在目标平台启动一台虚拟机；验证数据一致性和业务可用性；

步骤s7：源主机关机，停止业务系统；

步骤s8：在目标平台上对业务系统划分一个可以访问的ip，完成迁移。

作为一种优选的技术方案，步骤s1中的源主机包括物理服务器和虚拟化架构。

作为一种优选的技术方案，所述步骤s3中的目标平台为混合云架构形式。

作为一种优选的技术方案，所述步骤s3中的目标平台所采用混合云架构形式具体包括：超融合虚拟化平台或公有云平台或私有云平台。

作为一种优选的技术方案，所述步骤s2中可移动的san存储设备motiongear中采用物理方式运输到云平台时，需要执行智能驱动适配的步骤。

作为一种优选的技术方案，所述方法还包括从源服务器和服务器模块之间直接采用公网传输的方式增量备份数据的步骤。

本发明第二个目的是，提供一种基于网络状态不佳、大数据量系统迁移的存储设备。

为实现上述目的，本发明采取的技术方案是：

基于网络状态不佳、大数据量系统迁移的存储设备，所述的存储设备包括源服务器、可移动的san存储设备、服务器模块、云平台、控制器；所述的源服务器将数据同步至可移动的san存储设备上，可移动的san存储设备对数据进行同步后，将已经同步数据完成的存储设备人工搬运到目标端机房，然后对移动数据储存进行镜像操作，将移动储存设备上的数据同步到云平台上；所述的控制器用于迁移流程中对服务器模块进行集中管理，同时服务器模块通过复制方式触发数据同步任务；所述服务器通过公网传输的方式增量备份数据。

作为一种优选的技术方案，所述的源服务器设置在机房a中；所述的云平台、服务器模块以及控制器设置在机房b中。

作为一种优选的技术方案，所述的目标平台上设置有底层存储的空白卷。

作为一种优选的技术方案，所述的可移动的san存储设备进行物理方式运输时，是机房a运输至机房b中。

本发明优点在于：

1、本发明涉及数据通过移动san存储设备迁移至云平台。即，在源系统数据巨大，异地传输超过网络传输条件承载力时，将数据同步至可移动的san存储设备中(即motiongear)，以物理运输的方式，将系统快速、安全、高效的迁移至目标平台。可达到源系统不停，线下客户端无需安装管理服务器就能解决大数据量系统上云的效果，克服大规模数据上云的常见挑战，降低90％的数据迁移成本。

2、海量数据同步及传输过程中，源业务系统不停机；

3、线下客户端无需安装管理服务器；

4、快速、安全、高效、降低90％的数据迁移成本；

5、最小化手动操作；

6、大幅降低人力、物力和时间的投入；

7、解除厂商绑定，迁移简单化。用户不再被网络状态不佳、数据的完整性和安全性，以及业务的连续性困扰。灵活扩展、维护简单；

8、防尘防水，抗震抗压。

9.本发明的于网络状态不佳、大数据量系统迁移的方法，迁移方案是：将一台有海量数据的源主机通过可移动的san存储设备motiongear,以物理运输的方式，迁移到云平台，该方案操作步骤简便，且能够保证数据的完整性和安全性，以及业务的连续性。

附图说明

附图1是本发明的基于网络状态不佳、大数据量系统迁移的存储设备的结构示意图。

附图2是本发明的基于网络状态不佳、大数据量系统迁移的实施流程图。

附图3是本发明的基于网络状态不佳、大数据量系统迁移方法的流程示意图。

具体实施方式

下面结合附图对本发明提供的具体实施方式作详细说明。

请参照图1，图1是本发明的基于网络状态不佳、大数据量系统迁移的存储设备的结构示意图。所述的存储设备包括源服务器、可移动的san存储设备、服务器模块、云平台、控制器；所述的源服务器将数据同步至可移动的san存储设备上，可移动的san存储设备对数据进行同步后，将已经同步数据完成的存储设备人工搬运到目标端机房，然后对移动数据储存色设备进行镜像操作，将移动存储设备上的数据同步到云平台上；所述的控制器用于迁移流程中对服务器模块进行集中管理，同时服务器模块通过复制方式触发数据同步任务；所述服务器通过公网传输的方式增量备份数据。

需要说明的是：源主机包括物理服务器和虚拟化架构，使得被迁移数据的对象范围广。使得本实施例的方案推广使用范围广。

目标平台为混合云架构形式，目标平台包括超融合虚拟化平台或公有云平台或私有云平台，避免使用的虚拟化技术不同，底层使用的硬件存储资源不同，会导致主机驱动无法适配。

请参照图2和图3，图2是本发明的基于网络状态不佳、大数据量系统迁移的实施流程图。图3是本发明的基于网络状态不佳、大数据量系统迁移方法的流程示意图。

本发明提供一种技术方案：一种基于源业务系统不停机的情况下，本地数据中心大规模传输上云的迁移周期长，网络专线费用昂贵，数据复制效率低，迁移过程数据安全等问题的解决方式。

以1t实际数据为例：公网带宽为50mbyte，内网带宽为1000mbyte，带宽使用率为80％，增量数据为5％/天。

使用公网传输：全量数据为64小时左右(第一次全量58小时加上两天的增量5.8小时)

使用motiongear方案：7小时左右(全量数据2.9小时，搬运3小时，第一次增量1小时)

使用场景为：将一台有海量数据的主机(源主机)通过可移动的san存储设备(motiongear),以物理运输的方式，迁移到云平台(目标平台，可以是超融合虚拟化平台，也可以是公/私有云平台)上。具体流程如下：

第一步：在源主机上安装代理软件agent，被迁移软件管理；

第二步：将数据全对象拷贝至motiongear中；

第三步：在目标平台上启动一台虚拟机，安装迁移软件hypergate；

第四步：迁移软件hypermotion从目标平台的存储中获取一块空白卷挂给san存储设备motiongear；

第五步：将san存储设备motiongear中的源主机块级别的数据拷贝至目标平台的空白卷中；

第六步：数据拷贝完成后，在迁移软件hypermotion中执行迁移操作，该操作会将对应的目标平台的卷做成快照，在目标平台启动一台虚拟机。验证数据一致性和业务可用性；

第七步：源主机关机，停止业务系统；

第九步：在目标平台上对业务系统划分一个可以访问的ip，完成迁移。

本发明的基于网络状态不佳、大数据量系统迁移的方法及存储设备具有以下技术效果：

1、本发明涉及数据通过移动san存储设备迁移至云平台。即，在源系统数据巨大，异地传输超过网络传输条件承载力时，将数据同步至可移动的san存储设备中(即motiongear)，以物理运输的方式，将系统快速、安全、高效的迁移至目标平台。可达到源系统不停，线下客户端无需安装管理服务器就能解决大数据量系统上云的效果，克服大规模数据上云的常见挑战，降低90％的数据迁移成本。

2、海量数据同步及传输过程中，源业务系统不停机。

3、线下客户端无需安装管理服务器。

4、快速、安全、高效、降低90％的数据迁移成本；

5、最小化手动操作。

6、大幅降低人力、物力和时间的投入。

7、解除厂商绑定，迁移简单化。用户不再被网络状态不佳、数据的完整性和安全性，以及业务的连续性困扰。灵活扩展、维护简单。

8、防尘防水，抗震抗压。

9.本发明的于网络状态不佳、大数据量系统迁移的方法，迁移方案是：将一台有海量数据的源主机通过可移动的san存储设备motiongear,以物理运输的方式，迁移到云平台，该方案操作步骤简便，且能够保证数据的完整性和安全性，以及业务的连续性。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员，在不脱离本发明方法的前提下，还可以做出若干改进和补充，这些改进和补充也应视为本发明的保护范围。