一种基于物联网的多源异构数据融合方法与流程

本申请涉及数据处理技术领域，尤其涉及一种基于物联网的多源异构数据融合方法。

背景技术：

随着物联网(internetofthing，iot)的蓬勃发展，其所连接的终端设备的类型也越来越丰富，例如包括车辆(vehicles)、船舶(ships)、飞机(airplanes)、卫星(satellites)、智能家居产品(smarthomeproducts)、气象设备(meteorologicaldevices)、环保设备(environmentalprotectiondevices)、传感器(sensors)、消防设备(fire-fightingdevices)、手机(cellphones)、医疗器械(medicalinstruments)等。

物联网是多源异构网络架构的“触角”，在多源异构网络架构的每一个地区，每一段时间内都需要各种各样的触角进行数据采集和整理，以形成未来决策和预判的关键依据。

但是，现有技术中，基于物联网的多源异构网络架构数据采集还处于一个初级阶段，尤其涉及到涉密的iot设备进行数据采集时，除了传统的加密手段，并没有针对多源异构网络架构数据融合过程而设计的、涉及不同iot类型进行加密的手段，导致安全性较差，数据有泄漏风险。

技术实现要素：

本申请实施例提供一种基于物联网的多源异构数据融合的方法，用于解决现有技术中多源异构网络架构数据融合过程中其安全性差的问题。

本发明实施例一种基于物联网的多源异构数据融合的方法，应用于多源异构网络架构中，其中所述多源异构网络包括感知层、汇聚层及核心层，所述感知层包括若干个物联网iot设备，所述若干个iot设备采用多源异构网络进行组网，所述汇聚层由多个数据传输单元dts联网组成，所述核心层由网络功能虚拟化nfv单元进行配置，包括：

所述dts采集所述多个iot设备的数据，所述数据中包含所述不同iot的类型标识；

所述dts将所述iot设备数据进行数据组合，定义所述数据组合为源数据组；

所述dts基于所述iot的类型标识，以及所述类型标识对应的加密等级，将所述源数据组中部分iot数据进行一次裂变，并将所述裂变的iot数据插入到所述源数据组中，定义所述插入后的源数据组为一次裂变数据组；

所述dts将所述一次裂变数据组中的部分iot数据进行第二次裂变，将所述裂变后的iot数据按照随机插入算法插入到所述一次裂变数据组中，定义所述插入后的一次裂变数据组为二次裂变数据组；

所述dts将所述二次裂变数据组中的部分iot数据进行第三次裂变，将所述裂变后的iot数据按照非对称加密算法进行加密，并按照随机插入算法插入到所述二次裂变数据组中，定义所述插入后的二次裂变数据组为三次裂变数据组；

所述dts将所述三次裂变数据组发送至所述核心层。

可选地，所述dts将所述iot设备数据进行数据组合，包括：

所述dts将所述iot设备按照不同地区编号，不同时间进行组合，并形成矩阵式数据组。

可选地，所述dts将所述源数据组中部分iot数据进行一次裂变，包括：

对所述部分iot数据进行一次切分，将所述iot切分为两部分数据，且所述两部分数据的数据量差值小于预设阈值；

或，对所述部分iot数据进行一次复制，生成两个iot数据；

其中，所述部分iot数据的加密等级大于等于一级加密，所述加密等级与所述裂变次数一一对应。

可选地，所述dts将所述一次裂变数据组中的部分iot数据进行第二次裂变，包括：

对所述一次裂变数据组中的部分iot数据进行一次切分，将所述iot切分为两部分数据，且所述两部分数据的数据量差值小于预设阈值；

其中，所述部分iot数据的加密等级大于等于二级加密。

可选地，所述dts将所述二次裂变数据组中的部分iot数据进行第三次裂变，包括：

对所述二次裂变数据组中的部分iot数据进行一次切分，将所述iot切分为两部分数据，且所述两部分数据的数据量差值小于预设阈值；

对所述两部分数据采用不同的非对称加密算法进行数据加密，生成对应的密文；

其中，所述二次裂变数据组中的部分iot数据的加密等级大于等于三级加密。

可选地，所述方法还包括：

所述dts对三次裂变数据组的部分iot数据进行第n次裂变，其中n为大于3的自然数；

其中，所述三次裂变数据组中的部分iot数据加密等级大于等于n级加密。

上述提供的基于物联网的多源异构数据融合的方法，通过至少三次数据裂变，并依次将数据按照某种规律插入到原数据组中，形成经过数据融合过程加密机制，解决了现有技术中数据安全性差的问题，提升了数据保密性，尤其适用于某些需要高加密等级的数据加密。

附图说明

为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍。

图1为一个实施例中多源异构网络架构网络拓扑图；

图2为一个实施例中基于物联网的多源异构数据融合的流程示意图；

图3为一个实施例中数据裂变示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

图1为本发明实施例中多源异构网络架构的网路架构图。如图1所示，多源异构网络架构可分为四层，第一层为感知层，感知层中包含了各种各样的iot设备，用于在不同时间不同地址采集不同类型的数据，感知层中，各个iot设备处于多模异构无线(multimodeheterogeneouswirelessnetwork，mhwn)网络。本发明实施例中，mhwn网络是一种多模异构网络。多模异构网络是包含有多种类型节点和多种类型关系的网络，它将相互重叠的不同类型网络融合起来以，从而满足未来终端的业务多样性需求，且mhwn网络被配置为可以根据通信或业务的动态和差异化要求而在多种通信网络之间进行动态的选择和切换。第二层为汇聚层，即接入层，汇聚层中包含了多个数据传输系统dts，每一个dts负责汇总当前小区cell内所有iot设备上报的数据，并传输至核心层，其中，汇聚层可以使用软件定义sdn的无线电技术融合多种通信网络，数据传输单元能够通过所述多种通信网络中的一种或多种通信，实现sdr功能的软件模块可运行于mhwn网络。第三层为核心层，核心层为网络切片的虚拟组网结构，即由网络功能虚拟化nfv进行配置，用于对上报的数据进行分级决策，其中，nfv是核心层的底层平台架构。该mhwn网络的接入网。第四层为应用层，当核心层进行了分析决策之后，即进行各种不同的应用。

其中，多种通信网络包括宽带网络和窄带网络，所述宽带网络包括公用移动通信网络和/或无线局域网络，所述公用移动通信网络包括但不限于3g、4g和5g网络中的至少一种，所述无线局域网络包括但不限于wifi网络，所述窄带网络包括但不限于nb-iot(narrowbandinternetofthings，窄带物联网)网络、lte-m(lte-machinetomachine，lte机器对机器)网络、lora(longrangeradio，远距离无线电)网络中的至少一种。

其中，数据传输单元可起到连接不同网络的作用。数据传输单元因支持多种网络，它可以和多模无线基站通过多种通信网络中的一种或多种通信，它也可以通过终端所支持的通信方式与终端通信，从而实现了不同类型的终端与不同类型的基站之间的网络连接。

其中，当该网络应用于物联网，所述终端可包括感知设备，所述感知设备可包括传感器和/或执行器。从更广泛的应用领域来说，所述终端包括但不限于倾斜摄影、车辆(vehicles)、船舶(ships)、飞机(airplanes)、卫星(satellites)、智能家居产品(smarthomeproducts)、气象设备(meteorologicaldevices)、环保设备(environmentalprotectiondevices)、传感器(sensors)、消防设备(fire-fightingdevices)、手机(cellphones)、医疗器械(medicalinstruments)等。

(1)终端通过其与数据传输单元的连接(例如，bluetooth，zigbee，z-wave，wifi，wpan等)将其自身的数据发送至数据传输单元；本发明实施例对于终端和数据传输单元的连接方式不予限制。

(2)数据传输单元将终端的数据通过mhwn网络进行传输，其中，mhwn网络在nfv网络单元的控制下，可选择通过lte、wifi和iot等多种不同通信网络对数据进行传输，其中，nfv可基于多种选项实现对网络回传的智能选择，不限于可选网络的覆盖或容量情况，还包括基于上层业务请求或数据业务特征的调度。例如，数据传输单元获取的来自传感器的数据，可以通过iot网络传输；数据传输单元获取的来自视频监控设备的视频数据，可以通过lte或者wifi网络传输等。nfv核心网络单元与mhwn网络之间可通过有线或无线进行连接，其中，所述lte可以被5g或更高的通信标准替代，其中，iot可包括lora(lorawan)，nb-iot等等。

图2是本发明实施例的方法流程图，如图2所示，本发明实施例提供一种基于物联网的多源异构数据融合方法，包括：

s101、dts采集多个iot设备的数据，数据中包含不同iot的类型标识；

多个iot设备的数据上传至dts设备，即，dts设备采集多个iot设备的数据，其中，上传的数据格式中具备iot类型标识，方便在后续数据处理过程中知晓当前元数据的数据类型，例如当前的数据类型是天气数据、地理位置数据、温湿度数据等。iot类型标识可以自定义，例如8个bit位(1个byte)的标识，用于唯一指示该数据类型。

s102、dts将iot设备数据进行数据组合，定义数据组合为源数据组；

数据组合也是数据融合的第一步，数据组合即将不同类型的iot数据进行分组及合并的过程，在本发明实施例中，可以组合成不同的数据组，例如，dts将iot设备按照不同地区编号，不同时间进行组合，并形成矩阵式数据组。如，同一地区的不同时间段(t0-t2时间段)，产生了a,b,c三类iot数据，那么其数据组合形式可以为：a1,b1,c1,a2,b2,c2,a3,b3,c3…。

s103、dts基于iot的类型标识，以及类型标识对应的加密等级，将源数据组中部分iot数据进行一次裂变，并将裂变的iot数据插入到源数据组中，定义插入后的源数据组为一次裂变数据组；

需要说明的是，在本发明实施例中，iot的类型标识与加密等级相对应，为了方便说明，以军工类iot设备和民用类iot设备举例，军工类iot设备类型为a和b，其数据保密性较高，定义为安全等级为二级和三级，民用类iot设备类型为c，其数据保密性一般，定义为安全等级为一级，那么对于数据融合过程中采集到的数据组为a,b,c的数据格式中，由于其数据保密性要求不同，故需要加密处理的方式也不同。例如，以加密等级作为规定，一级加密及以上定义为至少需要一次数据裂变，二级加密及以上定义为至少需要二次数据裂变，…n级加密及以上等级定义为至少需要n次数据裂变。则在以a,b,c为类型组成的数据组中，a,b,c均需要经过一次数据裂变，完成第一层加密，而a,b需要再一次进行数据裂变，完成第二层加密，c不需要；a需要第三次进行数据裂变，b和c不需要。

数据裂变的定义即将数据包一分为二，通过切分或者复制的方式进行。

在本发明实施例中，dts对部分iot数据进行一次切分，将iot切分为两部分数据，且两部分数据的数据量差值小于预设阈值，即，保证两部分数据量较为均衡，不能差别过大；或，对部分iot数据进行一次复制，生成两个iot数据；此时，无论是切分还是复制的方式，a,b,c三类数据依次分裂为a1,a2,b1,b2,c1和c2的两部分数据，其中，a1和a2是a的分类数据，b1和b2是b的分类数据，c1和c2是c的分类数据。

其中，部分iot数据的加密等级大于等于一级加密，加密等级与裂变次数一一对应，即一级加密对应一次裂变，二级加密对应二次裂变，三级加密对应三次裂变，n次加密对应n次裂变。

s104、dts将一次裂变数据组中的部分iot数据进行第二次裂变，将裂变后的iot数据按照随机插入算法插入到一次裂变数据组中，定义插入后的一次裂变数据组为二次裂变数据组；

第二次裂变针对的是加密等级大于等于二级加密的数据，与第一次裂变类似，第二次裂变也是采用切分或复制的方式进行。其中，随机插入算法可以按照random()函数进行随机插入。随机函数是较为成熟的处理算法，这里不再累述。

可选地，dts将一次裂变数据组中的部分iot数据进行第二次裂变，具体可以为：

对一次裂变数据组中的部分iot数据进行一次切分，将iot切分为两部分数据，且两部分数据的数据量差值小于预设阈值；

其中，部分iot数据的加密等级大于等于二级加密。

s105、dts将二次裂变数据组中的部分iot数据进行第三次裂变，将裂变后的iot数据按照非对称加密算法进行加密，并按照随机插入算法插入到二次裂变数据组中，定义插入后的二次裂变数据组为三次裂变数据组；

在s105中，与s104不同的是，对于高保密级别数据，除了传统的裂变+随机插入方式外，还需要对裂变后的数据进行非对称加密算法加密，生成密文，再将密文进行随机插入，即通过裂变+非对称加密+随机插入的方式进行数据保护。非对称加密算法种类有很多且技术较为成熟，本发明实施例对此并无限制。

在s105中，其第三次裂变的方式可为：对二次裂变数据组中的部分iot数据进行一次切分，将iot切分为两部分数据，且两部分数据的数据量差值小于预设阈值；

对两部分数据采用不同的非对称加密算法进行数据加密，生成对应的密文；

其中，二次裂变数据组中的部分iot数据的加密等级大于等于三级加密。

可选地，方法还包括：

dts对三次裂变数据组的部分iot数据进行第n次裂变，其中n为大于3的自然数；

其中，三次裂变数据组中的部分iot数据加密等级大于等于n级加密。

s106、dts将三次裂变数据组发送至核心层。

为了方便说明，本发明实施例的数据裂变过程可参考图3所示。如图3所示，iot类型共分为a,b,c三个类型，其中a类型是3级加密等级，b类型是1级加密等级，c无需加密。以不同时间采集到的数据为例，源数据组格式为a1,b1,c1,a2,b2,c2…。

第一次裂变：在经过一次裂变后，a1分裂为a11,a12，a2分裂为a21,a22,b1分裂为b11,b12,c由于其无需加密，故无需裂变。

第二次裂变：a11分裂为a111,a112,a12分裂为a121,a122,a21分裂为a211,a212…，并随机插入，b由于加密等级为1，故无需进行第二次裂变。

第三次裂变：a111分裂为a1111,a1112,a112分裂为a1121,a1122…，并进行非对称加密，得到a1111’,a1112’,a1121’a1122’…，并将加密后的分裂数据随机插入到数据组中。

上述提供的基于物联网的多源异构数据融合的方法，通过至少三次数据裂变，并依次将数据按照某种规律插入到原数据组中，形成经过数据融合过程加密机制，解决了现有技术中数据安全性差的问题，提升了数据保密性，尤其适用于某些需要高加密等级的数据加密。

以上上述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。