数据接收方法、装置、设备和可读存储介质与流程

文档序号:33511083发布日期:2023-03-21 23:28阅读:75来源:国知局
数据接收方法、装置、设备和可读存储介质与流程

1.本技术属于信息技术领域,尤其涉及一种数据接收方法、装置、设备和可读存储介质。


背景技术:

2.随着国家信息科技产业规划及国产化战略的发展,国产化的数据库已逐步的在各个行业机构全面使用。通过国产化的数据库可以用来接收不同供应方提供的业务数据,而确保业务数据准确、稳定、安全、高效接入数据库,仍是需要关注的问题。
3.目前,数据库直接接收不同数据的供应方发送的业务数据。由于供应方在提供的业务数据时,数据库仅根据接口接收到的数据的文档类型判断业务数据的接入模式,不同接入模式的业务数据在接入时容易相互影响,进而容易影响数据库接收业务数据的响应速度,以及数据库运行的稳定性。


技术实现要素:

4.本技术实施例提供一种数据接收方法、装置、设备和可读存储介质,能够数据库接收业务数据的响应速度,以及数据库运行的稳定性。
5.第一方面,本技术实施例提供一种数据接收方法,方法应用于数据接收平台,方法包括:
6.接收供应方基于预设数据接入模式发送的业务数据,其中,供应方的数量为至少一个,每个供应方对应预设数据接入模式;
7.从多个数据库中确定与预设数据接入模式对应的目标数据库;
8.向目标数据库发送业务数据,目标数据库用于存储目标数据。
9.在第一方面的一些可实现方式中,多个数据库中包括对应第一类别的数据库和对应第二类别的数据库;
10.当目标数据库的类别为第二类别时,目标数据库还用于向第一类别的数据库发送业务数据,第一类别的数据库用于存储业务数据。
11.在第一方面的一些可实现方式中,在接收供应方基于预设数据接入模式发送的业务数据之前,方法包括:
12.获取业务方的业务请求,业务请求包括业务需求信息和数据接入要求;
13.根据业务请求,查找业务请求对应的供应方;
14.根据数据接入要求,设置业务请求对应的供应方对应的接入模式,得到业务请求对应的供应方的预设数据接入模式。
15.在第一方面的一些可实现方式中,预设接入模式至少包括以下模式中的一种:实时连接模式、批量数据接入模式、交易带附件接入模式、数据异步推送模式。
16.第二方面,本技术实施例提供一种数据接收装置,装置应用于数据接收平台,装置包括:
17.接收模块,用于接收供应方基于预设数据接入模式发送的业务数据;
18.处理模块,用于从多个数据库中确定与预设数据接入模式对应的目标数据库;
19.发送模块,用于向目标数据库发送业务数据,目标数据库用于存储目标数据。
20.在第二方面的一些可实现方式中,装置还包括:
21.获取模块,用于获取业务方的业务请求;
22.处理模块,还用于根据业务请求,查找业务请求对应的供应方,并设置业务请求对应的供应方对应的接入模式,得到业务请求对应的供应方的预设数据接入模式。
23.在第二方面的一些可实现方式中,多个数据库中包括对应第一类别的数据库和对应第二类别的数据库;
24.当目标数据库的类别为第二类别时,目标数据库还用于向第一类别的数据库发送业务数据,以用于第一类别的数据库存储业务数据。
25.在第二方面的一些可实现方式中,预设接入模式至少包括以下模式中的一种:实时连接模式、批量数据接入模式、交易带附件接入模式、数据异步推送模式。
26.第三方面,本技术提供一种电子设备,该设备包括:处理器以及存储有计算机程序指令的存储器;处理器执行计算机程序指令时实现第一方面或者第一方面任一可实现方式中的数据接收方法。
27.第四方面,本技术提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序指令,计算机程序指令被处理器执行时实现第一方面或者第一方面任一可实现方式中所述的数据接收方法。
28.第五方面,本技术实施例提供了一种计算机程序产品,所述计算机程序产品中的指令由电子设备的处理器执行时,使得所述电子设备执行如第一方面或者第一方面任一可实现方式中所述的数据接收方法。
29.本技术实施例提供了一种数据接收方法、装置、设备和可读存储介质。可以应用于数据接收平台,数据接收平台可以接收至少一个供应方发送的业务数据。其中,每个所述供应方对应预设数据接入模式。数据接收平台可以接收供应方基于预设数据接入模式发送的业务数据,因此,不同接入模式的业务数据在接入时,可以互不影响。对于不同供应方发送的业务数据,数据接收平台先从多个数据库中确定与预设数据接入模式对应的目标数据库;再向目标数据库发送业务数据,目标数据用于存储目标数据库。如此,由于不同接入模式的业务数据在接入时可以互不影响,能够提高数据库接收业务数据的响应速度,以及提高数据库运行的稳定性。
附图说明
30.为了更清楚地说明本技术实施例的技术方案,下面将对本技术实施例中所需要使用的附图作简单的介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
31.图1是本技术实施例提供的一种数据接收方法的流程示意图;
32.图2是本技术实施例提供的一种数据接收装置的结构示意图;
33.图3是本技术实施例提供的一种电子设备的结构示意图。
具体实施方式
34.下面将详细描述本技术的各个方面的特征和示例性实施例,为了使本技术的目的、技术方案及优点更加清楚明白,以下结合附图及具体实施例,对本技术进行进一步详细描述。应理解,此处所描述的具体实施例仅意在解释本技术,而不是限定本技术。对于本领域技术人员来说,本技术可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本技术的示例来提供对本技术更好的理解。
35.需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括
……”
限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
36.随着国家信息科技产业规划及国产化战略的发展,国产化的数据库已逐步的在各个行业机构全面使用。通过国产化的数据库可以用来接收不同供应方提供的业务数据,而确保业务数据准确、稳定、安全、高效接入数据库,仍是需要关注的问题。
37.示例性的,业务数据的供应方可以是各行各业的企业、机构等,业务数据可以由各行各业的企业、机构等在运营过程中产生的数据。通过将业务数据提供给金融机构等金融服务方,由金融服务方对业务数据进行分析,可以便于金融服务方提供准确、可靠的金融服务。因此,供应方提供的业务数据的能够准确、稳定、安全、高效的接入金融服务方由为重要。
38.目前,数据库直接接收不同数据的供应方发送的业务数据。由于供应方在提供的业务数据时,数据库仅根据接口接收到的数据的文档类型判断业务数据的接入模式,不同接入模式的业务数据在接入时容易相互影响,进而容易影响数据库接收业务数据的响应速度,以及数据库运行的稳定性。
39.针对于此,本技术实施例提供一种数据接收方法、装置、设备和可读存储介质,能够数据库接收业务数据的响应速度,以及数据库运行的稳定性。
40.需要说明的是,本技术实施例中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
41.下面首先对本技术实施例所提供的数据接收方法进行介绍。图1示出了本技术一个实施例提供的数据接收方法的流程示意图。如图1所示,该方法可以包括以下步骤:
42.步骤110,接收供应方基于预设数据接入模式发送的业务数据。
43.其中,供应方的数量为至少一个,每个供应方对应预设数据接入模式。
44.步骤120,从多个数据库中确定与预设数据接入模式对应的目标数据库。
45.步骤130,向目标数据库发送业务数据,目标数据库用于存储目标数据。
46.具体地,数据接收方法可以应用于数据接收平台,数据接收平台可以作为数据库的代理平台,用于接收业务数据,并判断接收到的业务数据的目标数据库。数据接收平台对应不同的数据接入模式划分不同的处理模块。基于此,供应方可以基于预设数据接入模式向数据接收平台发送的业务数据,数据接收平台集中接收每个供应方提供的业务数据。
47.数据接收平台可以同时与不同的数据库通信连接。具体地,在多个数据库中对应第一类别的数据库和对应第二类别的数据库。
48.示例性的,第一类别的数据库具体可以包括基于tidb的国产化分布式数据库,第二类别的数据库可以包括常用的oracle数据库。其中,可以预先设定不同的预设数据接入模式对应的目标数据库。
49.在本技术实施例中,数据接收平台可以从多个数据库中确定与预设数据接入模式对应的目标数据库,并向目标数据库发送业务数据,使目标数据库存储目标数据。
50.在一些实施例中,在接收供应方基于预设数据接入模式发送的业务数据之前,可以根据以下方法确定供应方对应的预设数据接入模式。具体地,获取业务方的业务请求,业务请求包括业务需求信息和数据接入要求;根据业务请求,查找业务请求对应的供应方;根据数据接入要求,设置业务请求对应的供应方对应的接入模式,得到业务请求对应的供应方的预设数据接入模式。
51.在一些实施例中,预设接入模式包括:实时连接模式、批量数据接入模式、交易带附件接入模式、数据异步推送模式。
52.示例性的,若所需接入数据量小,要求时效性高,则可以预设为实时连接模式;若数据量大,对时效性要求不高,则可以预设为批量数据接入模式。在批量数据接入模式中可以包括对业务数据进行抽取(extract)、转换(transform)、加载(load)等加工处理。
53.可选地,交易带附件是金融交易的一种常见形式,可对外提供文件服务,用户可以根据实际的应用需求,选择是否使用交易带附件接入模式。在数据异步推送模式中业务数据的传输过程可以更加可靠和稳定,用户可以根据实际的应用需求,选择是否使用数据异步推送模式。
54.根据本技术实施例,数据接收平台可以接收供应方基于预设数据接入模式发送的业务数据,因此,不同接入模式的业务数据在接入时,可以互不影响。对于不同供应方发送的业务数据,数据接收平台先从多个数据库中确定与预设数据接入模式对应的目标数据库;再向目标数据库发送业务数据,目标数据用于存储目标数据库。如此,由于不同接入模式的业务数据在接入时可以互不影响,能够提高数据库接收业务数据的响应速度,以及提高数据库运行的稳定性。
55.在一些实施例中,当目标数据库的类别为第二类别时,目标数据库还用于向第一类别的数据库发送业务数据,第一类别的数据库用于存储业务数据。
56.根据本技术实施例,第二类别的数据库在接收到业务数据后,通过向第一类别的数据库发送业务数据,方便第一类别的数据库中能够与第二类别的数据库中的业务数据保持一致,在需要将业务数据由第二类别的数据库迁移到第一类别的数据库时,可以有效提升迁移效率,降低迁移难度。在本技术实施例中,在数据库国产化之后,开发者可以根据自己的需求,可视化的选择自己想要落地的数据源。
57.继续以第一类别的数据库包括基于tidb的国产化分布式数据库,第二类别的数据库包括常用的oracle数据库为例,在采用国产化分布式数据库后,可以实现批量数据接入模式与联机数据隔离,由此,根据本技术实施例,可以实现随时实现批量数据接入模式,不受时间限制,如此,可以提高批量数据接入模式的时效性。
58.示例性的,数据库通常需要提供联机交易服务,例如,访问用户在数据库对业务数
据进行访问、查询等操作。由于批量数据接入模式与联机数据隔离,可以有效提高联机交易的实时响应,减少数据表读取失败、服务器宕机等情况出现。
59.基于相同的发明构思,本技术还提供了与上述数据接收方法对应的数据接收装置200。具体结合图2进行详细说明。
60.图2是本技术实施例提供的一种数据接收装置的结构示意图,如图2所示,该数据接收装置可以应用于数据接收平台,该数据接收装置200可以包括:接收模块210、处理模块220、发送模块230。
61.接收模块210,用于接收供应方基于预设数据接入模式发送的业务数据;
62.处理模块220,用于从多个数据库中确定与预设数据接入模式对应的目标数据库;
63.发送模块230,用于向目标数据库发送业务数据,目标数据库用于存储目标数据。
64.在一些实施例中,装置还包括:
65.获取模块,用于获取业务方的业务请求;
66.处理模块220,还用于根据业务请求,查找业务请求对应的供应方,并设置业务请求对应的供应方对应的接入模式,得到业务请求对应的供应方的预设数据接入模式。
67.在一些实施例中,多个数据库中包括对应第一类别的数据库和对应第二类别的数据库;
68.当目标数据库的类别为第二类别时,目标数据库还用于向第一类别的数据库发送业务数据,以用于第一类别的数据库存储业务数据。
69.在一些实施例中,预设接入模式至少包括以下模式中的一种:实时连接模式、批量数据接入模式、交易带附件接入模式、数据异步推送模式。
70.可以理解的是,本技术实施例的数据接收装置200,可以对应于本技术实施例提供的数据接收方法的执行主体,数据接收装置200的各个模块/单元的操作和/或功能的具体细节可以参见上述本技术实施例图1的数据接收方法中的相应部分的描述,为了简洁,在此不再赘述。
71.本技术实施例的数据接收装置,数据接收平台可以接收供应方基于预设数据接入模式发送的业务数据,因此,不同接入模式的业务数据在接入时,可以互不影响。对于不同供应方发送的业务数据,数据接收平台先从多个数据库中确定与预设数据接入模式对应的目标数据库;再向目标数据库发送业务数据,目标数据用于存储目标数据库。如此,由于不同接入模式的业务数据在接入时可以互不影响,能够提高数据库接收业务数据的响应速度,以及提高数据库运行的稳定性
72.图3示出了本技术一个实施例提供的电子设备的结构示意图。如图3所示,该设备可以包括处理器301以及存储有计算机程序指令的存储器302。
73.具体地,上述处理器301可以包括中央处理器(central processing unit,cpu),或者特定集成电路(application specific integrated circuit,asic),或者可以被配置成实施本技术实施例的一个或多个集成电路。
74.存储器302可以包括用于信息或指令的大容量存储器。举例来说而非限制,存储器302可包括硬盘驱动器(hard disk drive,hdd)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(universal serial bus,usb)驱动器或者两个或更多个以上这些的组合。在一个实例中,存储器302可以包括可移除或不可移除(或固定)的介质,或者存储器302是非易
失性固态存储器。存储器302可在电子设备的内部或外部。
75.存储器可包括只读存储器(rom),随机存取存储器(ram),磁盘存储介质设备,光存储介质设备,闪存设备,电气、光学或其他物理/有形的存储器存储设备。因此,通常,存储器包括一个或多个编码有包括计算机可执行指令的软件的有形(非暂态)计算机可读存储介质(例如,存储器设备),并且当该软件被执行(例如,由一个或多个处理器)时,其可操作来执行参考根据本公开的一方面的方法所描述的操作。
76.处理器301通过读取并执行存储器302中存储的计算机程序指令,以实现本技术实施例所描述的方法,并达到本技术实施例执行其方法达到的相应技术效果,为简洁描述在此不再赘述。
77.在一个示例中,该电子设备还可包括通信接口303和总线310。其中,如图3所示,处理器301、存储器302、通信接口303通过总线310连接并完成相互间的通信。
78.通信接口303,主要用于实现本技术实施例中各模块、装置、单元和/或设备之间的通信。
79.总线310包括硬件、软件或两者,将在线信息流量计费设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(accelerated graphics port,agp)或其他图形总线、增强工业标准架构(extended industry standard architecture,eisa)总线、前端总线(front side bus,fsb)、超传输(hyper transport,ht)互连、工业标准架构(industry standard architecture,isa)总线、无限带宽互连、低引脚数(lpc)总线、存储器总线、微信道架构(mca)总线、外围组件互连(pci)总线、pci-express(pci-x)总线、串行高级技术附件(sata)总线、视频电子标准协会局部(vlb)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线310可包括一个或多个总线。尽管本技术实施例描述和示出了特定的总线,但本技术考虑任何合适的总线或互连。
80.该电子设备可以执行本技术实施例中的数据接收方法,从而实现本技术实施例描述的数据接收方法的相应技术效果。
81.另外,结合上述实施例中的数据接收方法,本技术实施例可提供一种可读存储介质来实现。该可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种数据接收方法。可读存储介质的示例可以是非暂态机器可读介质,如电子电路、半导体存储器设备、只读存储器(read-only memory,rom)、软盘、只读光盘(compact disc read-only memory,cd-rom)、光盘、硬盘等。
82.需要明确的是,本技术并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见,这里省略了对已知方法的详细描述。在上述实施例中,描述和示出了若干具体的步骤作为示例。但是,本技术的方法过
83.程并不限于所描述和示出的具体步骤,本领域的技术人员可以在领会本申5请的精神后,做出各种改变、修改和添加,或者改变步骤之间的顺序。
84.以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时,其可以例如是电子电路、专用集成电路(application specific integrated circuit,asic)、适当的固件、插件、功能卡等等。当以软件方式实现时,本技术的元素是被用于执行所需任务0的程序或者代码段。程序或者代码段可以存储在机器可读介质中,或者通
85.过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、只读存储器(read-only memory,rom)、闪存、可擦除只读存储器(erasable read only memory,erom)、软盘、5只读光盘(compact disc read-only memory,cd-rom)、光盘、硬盘、光纤介质、射频(radio frequency,rf)链路,等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
86.还需要说明的是,本技术中提及的示例性实施例,基于一系列的步骤
87.或者装置描述一些方法或系统。但是,本技术不局限于上述步骤的顺序,0也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例
88.中的顺序,或者若干步骤同时执行。
89.本技术实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现本技术实施例提供的数据接收方法。
90.5另外,结合上述实施例中的数据接收方法、装置,以及可读存储介
91.质,本技术实施例可提供一种计算机程序产品来实现。所述计算机程序产品中的指令由电子设备的处理器执行时,使得所述电子设备执行上述实施例中的任意一种数据接收方法。
92.上面参考根据本公开的实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各方面。应当理解,流程图和/或框图中的每个方框以及流程图和/或框图中各方框的组合可以由计算机程序指令实现。这些计算机程序指令可被提供给通用计算机、专用计算机、或其它可编程数据处理装置的处理器,以产生一种机器,使得经由计算机或其它可编程数据处理装置的处理器执行的这些指令使能对流程图和/或框图的一个或多个方框中指定的功能/动作的实现。这种处理器可以是但不限于是通用处理器、专用处理器、特殊应用处理器或者现场可编程逻辑电路。还可理解,框图和/或流程图中的每个方框以及框图和/或流程图中的方框的组合,也可以由执行指定的功能或动作的专用硬件来实现,或可由专用硬件和计算机指令的组合来实现。
93.以上所述,仅为本技术的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本技术的保护范围之内。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1