一种多网数据整合共享方法及系统、应用与流程

文档序号:29862384发布日期:2022-04-30 11:34阅读:162来源:国知局
一种多网数据整合共享方法及系统、应用与流程

1.本发明涉及一种多网数据整合共享方法及系统、应用,属于多网数据整合共享技术领域。


背景技术:

2.随着电子标识信息化应用的不断深入,数据交换和数据共享的需求越来越强烈。然而交通网、商业网建设的业务系统都是为满足自身业务管理需要,在不同时期建立的,从业务应用和数据关联上缺少总体规划和设计协调,系统之间数据交换共享存在困难,各自拥有的数据不能及时提供给其他需要这些数据的部门和单位使用,使得各个部门之间形成了一条条“数字鸿沟”,大量的数据得不到充分的利用,因此,研究电子标识信息共享交换,建立安全可靠的实时数据共享平台已成为交通信息化工作的重中之重。
3.现在各网之间的数据交互主要集中在以下4个方面:
4.(1)交通网是单独隔离性的网络,无法形成数据互通,融合,形成数据交互,需要在各地拉专线进行数据交互,维护成本较大,建设繁琐。
5.(2)各网的电子标识数据有交叉和重复,并且缺乏统一的标准,难以保证数据的准确性和一致性。
6.(3)各网电子标识数据分散利用率低,且由于各自数据存在局限性,无法形成一致的可全局分析的数据模型。
7.(4)各网有大量的数据交换需求,但没有很好的技术保障,成为系统良好运行的障碍。


技术实现要素:

8.本发明所要解决的技术问题是提供一种多网数据整合共享方法,基于对各不同类型网络中数据的采集,应用网络间的数据联系,进行数据之间的整合,实现多网应用之间的数据共享,提高多网数据共享的效率。
9.本发明为了解决上述技术问题采用以下技术方案:本发明设计了一种多网数据整合共享方法,用于实现预设指定各个不同类型网络中数据的整合与共享,包括如下步骤:
10.步骤a.获取分别来自预设指定各个不同类型网络中的各个数据,作为各个待处理数据,并进入步骤b;
11.步骤b.根据各类型网络中的预设指定数据特征、以及不同类型网络之间的预设各指定数据联系,针对各待处理数据进行整合分类,获得各组整合数据,然后进入步骤c;
12.步骤c.针对各组整合数据,按步骤b中的各个整合方式,对各整合方式下的各组整合数据进行统计,获得各整合方式下整合数据的统计结果,然后进入步骤d;
13.步骤d.根据各整合方式下整合数据的统计结果,按预设各数据共享规则,针对各组整合数据,分别向各个不同类型网络推送相应整合数据进行共享。
14.作为本发明的一种优选技术方案:所述步骤a中,获取分别来自预设指定各个不同
类型网络中的各个数据,首先对各数据进行梳理,获得各数据所涉及各业务的业务流程与数据流,进而确定各数据分别所对应的唯一数据源;然后获取各业务中顺序第一数据源分别所对应的各数据,并执行完整检验、以及去冗余数据操作更新;最后将所获各个数据作为各个待处理数据,并进入步骤b。
15.作为本发明的一种优选技术方案:所述步骤a中,针对所获取分别来自预设指定各个不同类型网络中的各个数据进行梳理,获得各数据所涉及各业务的业务流程与数据流,再按照业务流程和预设统一数据标准,针对各数据进行格式转换,更新各数据,作为各个待处理数据,并进入步骤b。
16.作为本发明的一种优选技术方案:所述步骤b中,根据各类型网络中的预设指定数据特征、以及不同类型网络之间的预设各指定数据联系如下,针对各待处理数据进行整合分类,获得各组整合数据,然后进入步骤c;
17.数据联系1.根据不同类型网络之间的公用数据联系,针对不同类型网络之间公用的各待处理数据数据进行整合分类;
18.数据联系2.根据不同类型网络中决策所涉及的公用数据联系,针对不同类型网络中决策之间公用的各待处理数据数据进行整合分类;
19.数据联系3.根据各类型网络中分别所存在的数据冗余特征,针对各类型网络中的各冗余待处理数据数据进行整合分类;
20.数据联系4.根据各类型网络中各业务的结果数据,按各待处理数据与各业务结果数据的对应关系,针对各待处理数据进行整合分类。
21.作为本发明的一种优选技术方案:所述步骤d中,根据各整合方式下整合数据的统计结果,按预设各数据共享规则如下,针对各组整合数据,分别向各个不同类型网络推送相应整合数据进行共享;
22.数据共享规则1.分别针对各个不同类型网络,将网络所涉及、且区别于其他网络的整合数据,推送至该网络中进行共享;
23.数据共享规则2.针对不同类型网络之间所涉及的公用数据联系,将公用的各整合数据分别推送至相应所涉及的各网络中进行共享;
24.数据共享规则3.根据各不同类型网络所涉及的预设各非核心数据类型,将符合非核心数据类型的各整合数据分别推送至各网络中进行共享。
25.作为本发明的一种优选技术方案:所述步骤a中,通过基于ipsec安全协议的vpn网络,获取分别来自预设指定各个不同类型网络中的各个数据。
26.与上述相对应,本发明还要解决的技术问题是提供一种多网数据整合共享方法的系统,通过多模块联合应用设计,基于对各不同类型网络中数据的采集,应用网络间的数据联系,进行数据之间的整合,实现多网应用之间的数据共享,提高多网数据共享的效率。
27.本发明为了解决上述技术问题采用以下技术方案:本发明设计了一种多网数据整合共享方法的系统,包括系统基础环境、以及基于系统基础环境的业务系统数据库、中心数据库、数据应用模块、共享交换平台;
28.其中,业务系统数据库用于执行步骤a,获取分别来自预设指定各个不同类型网络中的各个数据,作为各个待处理数据;
29.中心数据库用于执行步骤b,根据各类型网络中的预设指定数据特征、以及不同类
型网络之间的预设各指定数据联系,针对各待处理数据进行整合分类,获得各组整合数据;
30.数据应用模块用于执行步骤c,针对各组整合数据,按步骤b中的各个整合方式,对各整合方式下的各组整合数据进行统计,获得各整合方式下整合数据的统计结果;
31.共享交换平台用于执行步骤d,根据各整合方式下整合数据的统计结果,按预设各数据共享规则,针对各组整合数据,分别向各个不同类型网络推送相应整合数据进行共享。
32.与上述相对应,本发明还要解决的技术问题是提供一种多网数据整合共享方法的系统的应用,针对射频数据采集的各不同类型网络,基于对各不同类型网络中数据的采集,应用网络间的数据联系,进行数据之间的整合,实现多网应用之间的数据共享,提高多网数据共享的效率。
33.本发明为了解决上述技术问题采用以下技术方案:本发明设计了一种多网数据整合共享方法的系统的应用,用于针对射频数据采集的各个不同类型网络,实现预设指定各个不同类型网络中数据的整合与共享;其中,各个不同类型网络分别均包括网络中间件、工控机、各个射频设备、以及各网络应用,各个不同类型网络的结构中,射频设备用于针对相应类型网络中的各个射频电子标签进行读取,获得各射频数据,射频设备经对应工控机与网络中间件相连通信,用于将所获各射频数据经工控机上传至网络中间件,网络中间件将所获射频数据发送至相应各网络应用中;
34.同时,各不同类型网络中的各个射频设备将所获各射频数据上传至业务系统数据库,再依次经由中心数据库、数据应用模块的处理,最后由共享交换平台向各不同类型网络中的各网络应用推送相应整合数据进行共享。
35.作为本发明的一种优选技术方案:所述各不同类型网络中的各个射频设备通过基于 ipsec安全协议的vpn网络,将所获各射频数据上传至业务系统数据库。
36.作为本发明的一种优选技术方案:所述各个不同类型网络包括交通网、商业网。
37.本发明所述一种多网数据整合共享方法及系统、应用,采用以上技术方案与现有技术相比,具有以下技术效果:
38.本发明所设计多网数据整合共享方法,针对来自各个不同类型网络中的各个数据,联系各类型网络的数据特征、以及不同类型网络之间的数据联系,针对所接收数据进行整合分类,获得各组整合数据,再基于对整合数据的统计,结合数据的整合规则,向各不同类型网络推送相应整合数据进行共享,并且整个方法实施过程,充分考虑数据间的逻辑关系、以及数据传输的安全性,进而提高多网数据共享的效率;同时设计了相应系统与应用,通过模块化的相互间应用,实现所设计方法在相应应用上的运用,将设计方法落实于实际的实施当中,获得交通网、商业网下数据的共享。
附图说明
39.图1是本发明所设计多网数据整合共享方法的系统的示意图;
40.图2是本发明所设计多网数据整合共享方法步骤a中数据预处理示意图;
41.图3是本发明所设计多网数据整合共享方法的系统的应用的示意图。
具体实施方式
42.下面结合说明书附图对本发明的具体实施方式作进一步详细的说明。
43.本发明所设计一种多网数据整合共享方法,用于实现预设指定各个不同类型网络中数据的整合与共享,实际应用当中,具体执行如下步骤a至步骤d。
44.步骤a.通过诸如基于ipsec安全协议的vpn网络,获取分别来自预设指定各个不同类型网络中的各个数据,作为各个待处理数据,并进入步骤b。
45.实际应用当中,关于上述步骤a所涉及来自预设指定各个不同类型网络中的各个数据,具体设计两种方式进行预处理,然后再进入步骤b。
46.其中方式一,上述步骤a中,如图2所示,获取分别来自预设指定各个不同类型网络中的各个数据,首先对各数据进行梳理,获得各数据所涉及各业务的业务流程与数据流,进而确定各数据分别所对应的唯一数据源;然后获取各业务中顺序第一数据源分别所对应的各数据,并执行完整检验、以及去冗余数据操作更新;最后将所获各个数据作为各个待处理数据,并进入步骤b。
47.方式二,上述步骤a中,如图2所示,针对所获取分别来自预设指定各个不同类型网络中的各个数据进行梳理,获得各数据所涉及各业务的业务流程与数据流,再按照业务流程和预设统一数据标准,针对各数据进行格式转换,更新各数据,作为各个待处理数据,并进入步骤b。
48.也可以将上述两种方式进行结合,针对所获来自预设指定各个不同类型网络中的各个数据进行综合处理。
49.这里基于ipsec安全协议的vpn网络,即4gvpn专网,具体实施应用中,4gvpn专网我们可以采用功能分区、模块化的设计理念,建设一个具备多级安全体制、统一运维管理、集中数据存储与备份及测试支持的数据中心基础架构.今后各个应用系统在进入数据中心时,仅需提出各自对于基础架构的要求,包括网络、服务器、存储、备份、安全的需求, 数据中心根据现有的资源及各个系统的要求,提供适当的基础设施资源并提供统一的运行维护和管理服务支持。
50.步骤b.根据各类型网络中的预设指定数据特征、以及不同类型网络之间的预设各指定数据联系,针对各待处理数据进行整合分类,获得各组整合数据,然后进入步骤c。
51.实际应用当中,上述步骤b中,具体设计根据各类型网络中的预设指定数据特征、以及不同类型网络之间的预设各指定数据联系如下,针对各待处理数据进行整合分类,获得各组整合数据,然后进入步骤c。
52.数据联系1.根据不同类型网络之间的公用数据联系,针对不同类型网络之间公用的各待处理数据数据进行整合分类。
53.数据联系2.根据不同类型网络中决策所涉及的公用数据联系,针对不同类型网络中决策之间公用的各待处理数据数据进行整合分类。
54.数据联系3.根据各类型网络中分别所存在的数据冗余特征,针对各类型网络中的各冗余待处理数据数据进行整合分类。
55.数据联系4.根据各类型网络中各业务的结果数据,按各待处理数据与各业务结果数据的对应关系,针对各待处理数据进行整合分类。
56.步骤c.针对各组整合数据,按步骤b中的各个整合方式,对各整合方式下的各组整合数据进行统计,获得各整合方式下整合数据的统计结果,然后进入步骤d。
57.步骤d.根据各整合方式下整合数据的统计结果,按预设各数据共享规则,针对各
组整合数据,分别向各个不同类型网络推送相应整合数据进行共享。
58.实际应用当中,上述步骤d中,根据各整合方式下整合数据的统计结果,按预设各数据共享规则如下,针对各组整合数据,分别向各个不同类型网络推送相应整合数据进行共享。
59.数据共享规则1.分别针对各个不同类型网络,将网络所涉及、且区别于其他网络的整合数据,推送至该网络中进行共享;具体实施中,采取平滑升级(直接交换).以vpn局域网方式直接共享数据,以解决其交换效率低、时效性较差等问题,提高其交换效率和质量.同时,保留其数据格式,不作标准化转换,以保证原有系统的正常运行。
60.数据共享规则2.针对不同类型网络之间所涉及的公用数据联系,将公用的各整合数据分别推送至相应所涉及的各网络中进行共享;具体实施中,交通网对各电子标识数据有相关订制需求,rfid双网设备可灵活配置数据格式,数据的发送方式等。以保证冗余数据的减少。这部分数据主要采取中心交换方式当数据中心库建成之后,可通过共享数据平台向交通网提供其所需共享的数据,形成中心数据库数据共享和交换,确保数据唯一、准确、规范。
61.数据共享规则3.根据各不同类型网络所涉及的预设各非核心数据类型,将符合非核心数据类型的各整合数据分别推送至各网络中进行共享,保证共享数据交换的效率和质量。
62.针对上述所设计多网数据整合共享方法,本发明进一步设计了实现此方法的系统,如图1所示,具体设计包括系统基础环境、以及基于系统基础环境的业务系统数据库、中心数据库、数据应用模块、共享交换平台。
63.其中,系统基础环境,为各种应用提供运行环境和测试环境,包括上述的网络环境。
64.业务系统数据库用于执行步骤a,获取分别来自预设指定各个不同类型网络中的各个数据,作为各个待处理数据,业务系统数据库是交换和整合的数据来源。
65.中心数据库用于执行步骤b,根据各类型网络中的预设指定数据特征、以及不同类型网络之间的预设各指定数据联系,针对各待处理数据进行整合分类,获得各组整合数据;应用中,中心数据库通过对分散在各系统的数据科学的分类组织,按照统一的数据标准建立的信息资源库,为今后的应用提供数据支持。
66.并且在应用中,应用标准规范、安全体系及管理运行机制:为数据中心提供安全、运行和标准化等支撑性保障。
67.数据应用模块用于执行步骤c,针对各组整合数据,按步骤b中的各个整合方式,对各整合方式下的各组整合数据进行统计,获得各整合方式下整合数据的统计结果,应用中,数据应用模块主要实现对已整合的数据进行统计和分析,并通过共享数据交换平台向各网发送所需的订制化电子标识数据。
68.共享交换平台用于执行步骤d,根据各整合方式下整合数据的统计结果,按预设各数据共享规则,针对各组整合数据,分别向各个不同类型网络推送相应整合数据进行共享。
69.将上述所设计多网数据整合共享方法的系统,应用于实际当中,即具体针对交通网、商业网的各个不同类型网络,实际场景中,交通网各应用系统之间的信息交换与共享的难度很大,交通网中都是由rfid设备识读到电子标识数据,通过在各网中的中间件推送至
相关的应用中,数据独立,并且数据格式不一样,商业应用中,则是由商业自己处理,怎么样才能突破这种隔离的限制,保证各网间的独立性,安全性,并且保证各方数据更好的融合。
70.因此这里针对交通网、商业网的各个不同类型网络,考虑本发明设计多网数据整合共享方法的系统的应用,针对射频数据采集的各个不同类型网络,实现预设指定各个不同类型网络中数据的整合与共享;其中,如图3所示,各个不同类型网络分别均包括网络中间件、工控机、各个射频设备、以及各网络应用,各个不同类型网络的结构中,射频设备用于针对相应类型网络中的各个射频电子标签进行读取,获得各射频数据,射频设备经对应工控机与网络中间件相连通信,用于将所获各射频数据经工控机上传至网络中间件,网络中间件将所获射频数据发送至相应各网络应用中。
71.并且在实际应用中,各个射频设备即rfid设备,rfid设备可采用双网卡模式,双网模式相互独立,保证了各网之间的独立性可以订制各网所需要的数据格式,实现从设备端灵活推送各网所需的数据形式。设备端只是添加了双网卡,在设备结构中没有做很大的改动,成本也大大降低。
72.各不同类型网络中的各个射频设备通过基于ipsec安全协议的vpn网络,将所获各射频数据上传至业务系统数据库,再依次经由中心数据库、数据应用模块的处理,最后由共享交换平台向各不同类型网络中的各网络应用推送相应整合数据进行共享。
73.关于基于ipsec安全协议的vpn网络,由于原来的tcp/ip体系中间,没有抱过基于安全的设计,任何人,只要能够搭入线路,即可分析所有的通讯数据。ipsec引进了完整的安全机制,包括加密,认证和数据防篡改功能。
74.ipsec协议通过包装封装技术,能够利用internet可路由的地址,封装内部网络的ip地址,实现异地网络的互通。
75.在保证网络密闭的同时,电子标识数据可带有相关rfid设备密钥进行安全性验证,并且rfid双网设备可实现数据加密,共享数据平台只是单向推送各网中间件,不会访问各网中的应用系统,保证了交通网的独立性和隔离性。
76.实际应用中,电子标识信息共享是一项复杂的系统工程,涉及网络、系统集成、信息安全、标准规范和rfid设备扩展等信息工程领域的各个方面,通过研究数据共享平台的总体框架、共享数据平台的数据处理流程、共享数据平台的数据处理方式和共享数据平台的数据安全性,经过上述的研究结果,在实际测试中,搭建了简单的设计模型,完成了4gvpn 专网的搭建,共享平台的数据接收分析与数据推送。
77.综上所述,上述技术方案所设计多网数据整合共享方法,针对来自各个不同类型网络中的各个数据,联系各类型网络的数据特征、以及不同类型网络之间的数据联系,针对所接收数据进行整合分类,获得各组整合数据,再基于对整合数据的统计,结合数据的整合规则,向各不同类型网络推送相应整合数据进行共享,并且整个方法实施过程,充分考虑数据间的逻辑关系、以及数据传输的安全性,进而提高多网数据共享的效率;同时设计了相应系统与应用,通过模块化的相互间应用,实现所设计方法在相应应用上的运用,将设计方法落实于实际的实施当中,获得交通网、商业网下数据的共享。
78.上面结合附图对本发明的实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1