本申请涉及物流及计算机,尤其涉及基于泛化调用的数据导入的方法、系统及设备。
背景技术:
1、随着快递行业的高速发展,相关的配套系统也日益增多,各系统对于数据导入的需求也日益突出。现有的实现方案是各系统各功能模块独立开发实现数据导入功能,存在大量通过硬编码方式实现的数据导入功能中无法通过配置动态完成数据源的切换、导入模板调整等,不利于后续的升级维护,且开发效率低,开发成本高。
2、即现有技术中,在进行数据导入时,存在大量通过硬编码方式实现的数据导入功能中无法通过配置动态完成数据源的切换、导入模板调整,造成升级维护困难,开发效率低,开发成本高。
技术实现思路
1、为至少在一定程度上克服相关技术中进行数据导入时,存在大量通过硬编码方式实现的数据导入功能中无法通过配置动态完成数据源的切换、导入模板调整的问题,本申请提供基于泛化调用的数据导入的方法、系统及设备。
2、本申请的方案如下:
3、第一方面,本申请提供基于泛化调用的数据导入的方法,所述方法包括:
4、添加相关任务信息;
5、利用所述相关任务信息,发送执行所述相关任务信息的消息通知;
6、接收所述消息通知,对所述任务信息进行数据解析处理;
7、利用所述解析处理的结果,循环导入所述相关任务信息中的数据,更新任务列表。
8、进一步地,所述相关任务信息,包括:
9、任务配置信息和列头配置信息。
10、进一步地,所述利用所述相关任务信息,对所述任务信息进行数据解析处理,包括:
11、接收所述消息通知,基于poi sax对所述消息队列中的相关任务信息中的任一任务中的每行数据进行解析;
12、利用所述任一任务中的每进行加工处理;行数据解析的结果,基于fill函数对所述每行数据中的每个单元格数据进行数据加工处理;
13、利用所述加工处理的结果,通过validator校验器对所述单元格进行数据校验,若校验不通过,则不进行数据回推处理,记录所述校验不通过的原因;
14、否则,基于invoke函数进行数据调用,并通过回调方式进行数据回推处理。
15、进一步地,所述通过回调方式进行数据回推处理,包括:
16、若所述回调方式为dubbo方式,则动态引入dubbo服务并缓存,并基于动态引入的dubbo服务,通过泛化调用形式进行回传数据;
17、若所述回调方式为mq,则回传当前解析的数据至指定topic中;
18、若所述回调方式为http,则回传当前解析的数据到指定http接口中。
19、第二方面,本申请提供基于泛化调用的数据导入的系统,所述系统包括:
20、任务添加模块,用于添加相关任务信息;
21、任务通知模块,用于利用所述相关任务信息,发送执行所述相关任务信息的消息通知;
22、任务解析模块,用于接收所述消息通知,对所述任务信息进行数据解析处理;
23、任务查询模块,用于利用所述解析处理的结果,循环导入所述相关任务信息中的数据,更新任务列表。
24、第三方面,本申请提供基于泛化调用的数据导入的设备,所述设备包括:
25、存储器,其上存储有可执行程序;
26、处理器,用于执行所述存储器中的所述可执行程序,以实现上述中任一项所述方法的步骤。
27、本申请提供的技术方案可以包括以下有益效果:
28、本申请通过添加相关任务信息;利用所述相关任务信息,发送执行所述相关任务信息的消息通知;接收所述消息通知,对所述任务信息进行数据解析处理;利用所述解析处理的结果,循环导入所述相关任务信息中的数据,更新任务列表。本申请帮助解决在进行数据导入时,存在大量通过硬编码方式实现的数据导入功能中无法通过配置动态完成数据源的切换、导入模板调整的问题,方便后期升级维护,提升开发效率,降低开发成本。
29、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
1.基于泛化调用的数据导入的方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述相关任务信息,包括:
3.根据权利要求1所述的方法,其特征在于,所述利用所述相关任务信息,对所述任务信息进行数据解析处理,包括:
4.根据权利要求3所述的方法,其特征在于,所述通过回调方式进行数据回推处理,包括:
5.基于泛化调用的数据导入的系统,其特征在于,所述系统包括:
6.基于泛化调用的数据导入的设备,其特征在于,所述设备包括: