一种数据迁移方法及装置与流程

文档序号:12786407阅读:来源:国知局

技术特征:

1.一种数据迁移方法,其特征在于,该方法包括:

基于第一数据库中的待迁移数据记录,确定第一待迁移文件;

将所述第一待迁移文件存储在设置的文件系统中,并将所述第一待迁移文件的标识信息存储在第二数据库中;

其中,所述第一待迁移文件的标识信息为用于标识所述第一待迁移文件在所述文件系统中的存储位置的信息。

2.如权利要求1所述的方法,其特征在于,所述文件系统为分布式文件系统。

3.如权利要求1所述的方法,其特征在于,将所述第一待迁移文件存储在设置的文件系统中,并将所述第一待迁移文件的标识信息存储在第二数据库中之后,还包括:

当接收到客户端针对所述第一待迁移文件的访问请求时,基于所述第二数据库中所述第一待迁移文件的标识信息,获取所述文件系统中存储的所述第一待迁移文件,并返回给所述客户端。

4.如权利要求1所述的方法,其特征在于,基于第一数据库中的待迁移数据记录,确定第一待迁移文件,包括:

从所述待迁移数据记录中,提取二进制文件;

将提取的所述二进制文件、和基于所述二进制文件转换得到的文本text文件两者中的至少一种确定为所述第一待迁移文件。

5.如权利要求4所述的方法,其特征在于,若所述第一待迁移文件包括所述二进制文件,则将所述二进制文件存储在设置的文件系统中,并将所述二进制文件的标识信息存储在第二数据库中之后,还包括:

当接收到客户端针对所述二进制文件的下载请求时,基于所述第二数据库中所述二进制文件的标识信息,从所述文件系统中获取所述二进制文件,并将获取的所述二进制文件缓存在内容分发网络CDN中;

向所述客户端返回所述二进制文件在所述CDN中的访问地址。

6.如权利要求4所述的方法,其特征在于,若所述待迁移数据记录为位于所述第一数据库的待存储队列中的新数据记录,则所述方法还包括:

将基于所述二进制文件转换得到的text文件存储在所述第一数据库中。

7.如权利要求4所述的方法,其特征在于,所述方法还包括:

从所述待迁移数据记录中,提取第二待迁移文件,所述第二待迁移文件为非二进制文件;

若所述待迁移数据记录为位于所述第一数据库的待存储队列中的新数据记录,则将所述第二待迁移文件存储在所述第一数据库和第二数据库中;

若所述待迁移数据记录为位于所述第一数据库的已存储列表中的历史数据记录,则将所述第二待迁移文件存储在所述第二数据库中。

8.如权利要求1所述的方法,其特征在于,所述方法还包括:

将所述第一数据库的已存储列表中的各条历史数据记录的标识信息写入预设数据表中;其中,每条历史数据记录的标识信息用于标识该条历史数据记录在所述第一数据库中的存储位置;

基于所述预设数据表中各条历史数据记录的标识信息,分别从所述第一数据库中提取每条未处理的历史数据记录作为所述待迁移数据记录,并在所述预设数据表中记录该条历史数据记录的处理状态。

9.一种数据迁移装置,其特征在于,该装置包括:

确定模块,用于基于第一数据库中的待迁移数据记录,确定第一待迁移文件;

存储模块,用于将所述第一待迁移文件存储在设置的文件系统中,并将所述第一待迁移文件的标识信息存储在第二数据库中;

其中,所述第一待迁移文件的标识信息为用于标识所述第一待迁移文件在所述文件系统中的存储位置的信息。

10.如权利要求9所述的装置,其特征在于,所述装置还包括:

第一获取模块,用于当接收到客户端针对所述第一待迁移文件的访问请求时,基于所述第二数据库中所述第一待迁移文件的标识信息,获取所述文件系统中存储的所述第一待迁移文件,并返回给所述客户端。

11.如权利要求9所述的装置,其特征在于,所述确定模块具体用于:

从所述待迁移数据记录中,提取二进制文件;将提取的所述二进制文件、和基于所述二进制文件转换得到的文本text文件两者中的至少一种确定为所述第一待迁移文件。

12.如权利要求11所述的装置,其特征在于,所述装置还包括:

第二获取模块,用于当接收到客户端针对所述二进制文件的下载请求时,基于所述第二数据库中所述二进制文件的标识信息,从所述文件系统中获取所述二进制文件,并将获取的所述二进制文件缓存在内容分发网络CDN中;向所述客户端返回所述二进制文件在所述CDN中的访问地址。

13.如权利要求11所述的装置,其特征在于,若所述待迁移数据记录为位于所述第一数据库的待存储队列中的新数据记录,则所述存储模块还用于:

将基于所述二进制文件转换得到的text文件存储在所述第一数据库中。

14.如权利要求11所述的装置,其特征在于,所述确定模块还用于:

从所述待迁移数据记录中,提取第二待迁移文件,所述第二待迁移文件为非二进制文件;

所述存储模块还用于:若所述待迁移数据记录为位于所述第一数据库的待存储队列中的新数据记录,则将所述第二待迁移文件存储在所述第一数据库和第二数据库中;若所述待迁移数据记录为位于所述第一数据库的已存储列表中的历史数据记录,则将所述第二待迁移文件存储在所述第二数据库中。

15.如权利要求9所述的装置,其特征在于,所述装置还包括:

记录模块,用于将所述第一数据库的已存储列表中的各条历史数据记录的标识信息写入预设数据表中;其中,每条历史数据记录的标识信息用于标识该条历史数据记录在所述第一数据库中的存储位置;基于所述预设数据表中各条历史数据记录的标识信息,分别从所述第一数据库中提取每条未处理的历史数据记录作为所述待迁移数据记录,并在所述预设数据表中记录该条历史数据记录的处理状态。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1