一种将oracle数据库内的数据导入到mongodb数据库的方法及系统与流程

本发明涉及数据迁移的技术领域，尤其涉及了一种将oracle数据库内的数据导入到mongodb数据库的方法及系统。

背景技术：

现在的技术中，随着业务项目发展，需求将oracle中的部分表数据迁移mongodb数据库中，但从oracle数据库导入到mongodb数据库中，没有现成的完成整个流程的技术。每次都必须手工分步骤先从oracle导出，然后在导入到mongodb数据库中，步骤繁琐，操作复杂，导入mongodb数据库的数据结构也不好控制。因此，简化oracle数据导入到mongodb数据库过程中的步骤，通过简单的配置实现数据的导入，控制导入到mongodb数据库的数据结构变得极为迫切。

技术实现要素：

本发明所要解决的技术问题是:目前oracle数据导入到mongodb数据库过程复杂，并且导入mongodb数据库的数据结构较难控制。

为解决上面的技术问题，本发明提供了一种将oracle数据库内的数据导入到mongodb数据库的方法，该方法包括如下步骤：

S1，通过结构化查询语言配置将从oracle数据库中导出的数据表导入到文本文件中；

S2，通过bson格式配置将导入到文本文件中的数据表转换为bson格式的数据表；

S3，通过mongodb数据库的配置查找mongodb数据库的主节点，并在主节点上执行数据表导入操作，将转换为bson格式的数据表导入到mongdb数据库中。

进一步，所述步骤S1中还包括：读取结构化查询语言配置和bson格式配置到内存中。

进一步，所述的结构化查询语言配置和bson格式配置采用shell脚本读取。

进一步，所述S2中还包括：转换为bson格式的数据表保持bson格式配置中的数据结构。

进一步，所述S2中包括：将从oracle数据库中导出的数据表与转换为bson格式的数据表，进行数据量的对比，当对比出现不一致的时候，返回重新执行步骤S1的过程。

上述进一步的有益效果：能够确保数据不丢失，若是出现丢失能够及时通知，数据完整得到保证。

进一步，S3中将数据表导入到mongdb数据库中后，校验导入到mongdb数据库中的数据表与bson格式的数据表是否一致。

有益效果：省去了大量人工操作的中间环节，并可以控制导入到mongodb数据库的数据结构，简化表数据由oracle迁移到mongodb数据库中的操作，降低了数据迁移的复杂度，节省了时间成本。

本发明还涉及一种将oracle数据库内的数据导入到mongodb数据库的系统，该系统包括：信息配置模块、信息转换模块、信息导入模块；所述的读取信息配置模块、信息转换模块、信息导入模块依次连接；信息配置模块，用于读取结构化查询语言配置和bson格式配置到内存中；信息转换模块，用于将从oracle数据库中导出的数据表转换数据格式；信息导入模块将由信息转换模块转换后的数据表导入到mongdb数据库中。

进一步，所述的信息配置模块包括：结构化查询语言配置单元和bson格式配置单元，所述结构化查询语言配置单元，用于读取结构化查询语言配置到内存中；bson格式配置单元，用于读取bson格式配置到内存中。

进一步，所述的信息转换模块包括：结构化查询语言转换单元和bson格式转换单元，所述的结构化查询语言转换单元将从oracle数据库中导出的数据表导入到文本文件中；所述的bson格式转换单元将文本文件中的数据表转换为bson格式数据表。

进一步，所述的信息导入模块还用于将数据表导入到mongdb数据库中后，校验导入到mongdb数据库中的数据表与bson格式的数据表是否一致。

本发明的有益效果：采用这样的数据导入系统，省去了大量人工操作的中间环节，并可以控制导入到mongodb数据库的数据结构，简化表数据由oracle迁移到mongodb数据库中的操作，降低了数据迁移的复杂度，节省了时间成本。

附图说明

图1为本发明的一种将oracle数据库内的数据导入到mongodb数据库的方法流程示意图；

图2为本发明的一种将oracle数据库内的数据导入到mongodb数据库的系统示意图。

具体实施方式

以下结合附图对本发明的原理和特征进行描述，所举实例只用于解释本发明，并非用于限定本发明的范围。

如图1所示，一种将oracle数据库内的数据导入到mongodb数据库的方法，该方法包括如下步骤：

首先，通过采用shell脚本与读取oracle数据库相关的结构化查询语言配置和bson格式配置到内存中；

接着，通过结构化查询语言配置将采用oraclespool方法从oracle数据库中导出的数据表导入到文本文件中；

其次，通过bson格式配置将文本文件中的数据表转换为bson格式，同时换为bson格式的数据表要保持bson格式配置中的数据结构，另外当将从oracle数据库中导出的数据表与转换为bson格式的数据表进行数据量的对比，当对比出现不一致的时候，会退出导入过程；

最后，通过mongodb数据库的配置查找mongodb数据库的主节点，并在主节点上执行数据表导入操作，通过mongoimport将转换为bson格式的数据表导入到mongodb中，将数据表导入到mongdb数据库中后，校验导入到mongdb数据库中的数据表与bson格式的数据表是否一致，不一致时重新开始步骤S1。

如图2所示，一种将oracle数据库内的数据导入到mongodb数据库的系统，该系统包括：信息配置模块、信息转换模块、信息导入模块；所述的读取信息配置模块、信息转换模块、信息导入模块依次连接；信息配置模块，用于读取结构化查询语言配置和bson格式配置到内存中；信息转换模块，用于将从oracle数据库中导出的数据表转换数据格式；信息导入模块将由信息转换模块转换后的数据表导入到mongdb数据库中。

信息配置模块包括：结构化查询语言配置单元和bson格式配置单元，所述结构化查询语言配置单元，用于读取结构化查询语言配置到内存中；bson格式配置单元，用于读取bson格式配置到内存中。

信息转换模块包括：结构化查询语言转换单元和bson格式转换单元，所述的结构化查询语言转换单元将从oracle数据库中导出的数据表导入到文本文件中；所述的bson格式转换单元将文本文件中的数据表转换为bson格式数据表。

信息导入模块还用于将数据表导入到mongdb数据库中后，校验导入到mongdb数据库中的数据表与bson格式的数据表是否一致。

在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。