一种数据接收服务器、及数据处理系统的制作方法

本实用新型涉及数据处理领域，尤其涉及一种数据接收服务器、及数据处理系统。

背景技术：

对于分布式的终端设备,对其进行数据监测和控制,是现有技术发展的一个需要。

随着网络的发展，监测终端设备的种类、数量急剧增加，呈现了急剧增长的数据量以及数据并发量与现有数据处理系统的性能之间的矛盾。

在现有的数据处理系统的框架结构下，数据获取部件、数据存储部件、数据解析部件及其构成的框架面对较大数数据量、数据并发量时，存在性能缺陷，容易导致数据丢失、错乱，以至于对终端设备的监测、控制出现错误或误差。

技术实现要素：

本实用新型的主要目的在于克服上述现有技术的缺陷，提出了一种数据接收服务器、及数据处理系统，以解决现有技术中数据处理系统框架面对大数据或数据突发量时的性能缺陷，能够提高数据处理的效率，合理分配系统资源，进而提高数据的安全性。

本实用新型一方面提供了一种数据接收服务器，包括数据接收装置和第一存储装置，所述数据接收装置，用于通过至少一个连接接收来自 客户端的数据；所述第一存储装置，包括至少一个第一存储单元和至少一个第二存储单元，所述第一存储单元中的每一个与所述数据接收单元的每一个连接相对应；所述第二存储单元中的每一个与至少一个所述客户端的属性中的每一个相对应。

可选地，所述连接包括所述数据接收装置与客户端的连接、和/或所述数据接收装置通过网络模块与客户端的连接。

可选地，还包括控制装置，所述控制装置用于当所述第一存储单元存储的数据大于等于第一阈值或者第一存储单元对应的连接中断时，将所述第一存储单元存储的数据分配至与数据相对应的所述第二存储单元中。

可选地，还包括第二存储装置和控制装置，所述控制装置用于当所述第二存储单元存储的数据大于等于第二阈值时，将所述第二存储单元存储的数据保存至所述第二存储装置中。

可选地，所述客户端属性包括客户端的类型，和/或客户端所在区域。

可选地，所述客户端包括家用电器、电脑、可穿戴设备、传感器中的至少一种。

可选地，所述第一存储单元、第二存储单元包括缓存器，所述第二存储装置包括本地服务器。

本实用新型又一方面提供了一种数据处理系统，其特征在于包括上述任一的数据接收服务器。

可选地，所述数据处理系统还包括数据转发服务器，所述数据转发服务器包括第三存储单元和第四存储单元和转发控制单元，所述第三存储单元，用于存储已建立连接的客户端；所述第四存储单元，用于存储已建立连接的网络模块，以及与监听所述网络模块的全部客户端，所述 转发控制单元，用于根据转发模式，根据所述第三存储单元或所述第四存储单元将待转发的数据转发至已建立连接的客户端或监听已建立连接的网络模块的全部客户端。

可选地，所述数据处理系统还包括第三存储装置和上传控制器，所述上传控制器用于将第二存储装置中的新数据上传至所述第三存储装置中，和/或将所述第二存储单元中的数据上传至所述第三存储装置。

可选地，所述第三存储装置包括HDFS(Hadoop Distributed File System)存储器。

可选地，所述数据处理系统还包括数据解析装置，所述数据解析装置包括数据接口单元，解析数据分配单元，以及至少一个解析数据处理单元；所述数据接口单元，用于接收来自所述第三存储装置的待解析的数据；所述解析数据分配单元，用于根据所述解析数据处理单元的处理能力和/或数据负荷将所述待解析数据分配至所述至少一个解析数据处理单元；所述解析数据处理单元，用于解析待解析数据形成解析后的数据。

可选地，所述数据处理系统还包括第四存储装置，所述第四存储装置用于存储所述解析后的数据，所述客户端能够对所述第四存储装置的数据进行处理。

本实用新型的技术方案能够解决现有技术中数据处理系统框架面对大数据或数据突发量时的性能缺陷，能够提高数据处理的效率，合理分配系统资源，进而提高数据的安全性。

附图说明

此处所说明的附图用来提供对本实用新型的进一步理解，构成本实 用新型的一部分，本实用新型的示意性实施例及其说明用于解释本实用新型，并不构成对本实用新型的不当限定。在附图中：

图1是本实用新型提供的数据接收服务器的一实施例的结构示意图；

图2是本实用新型提供的数据接收服务器的一实施例的结构示意图；

图3是本实用新型提供的数据处理系统的一实施例的结构示意图；

图4是本实用新型提供的数据转发服务器的一实施例的结构示意图；

图5是本实用新型提供的数据处理系统的一实施例的结构示意图；

图6是本实用新型提供的数据处理系统的一实施例的结构示意图；

图7是本实用新型提供的数据解析装置的一实施例的结构示意图；

图8是本实用新型提供的数据处理系统的一实施例的结构示意图。

具体实施方式

为使本实用新型的目的、技术方案和优点更加清楚，下面将结合本实用新型具体实施例及相应的附图对本实用新型技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本实用新型一部分实施例，而不是全部的实施例。基于本实用新型中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本实用新型保护的范围。

需要说明的是，本实用新型的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换， 以便这里描述的本实用新型的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

图1是本实用新型提供的数据接收服务器的一实施例的结构示意图。

本实用新型一具体实施方式，如图1所示。本实用新型实施方式提供的数据接收服务器11，包括数据接收装置111和第一存储装置113。

数据接收装置111，用于通过至少一个连接接收来自客户端数据。例如，数据接收装置111通过一连接连接至客户端，或者数据接收装置111连接至网络模块，网络模块再进一步连接至一个或多个客户端。

可选地,网络模块包括GPRS模块、3G/4G模块、Wi-Fi模块等。

可选地，客户端包括家用电器、电脑、可穿戴设备、各种传感器等可监测数据和/或需要进行控制的终端中的至少一种。

第一存储装置113，包括至少一个第一存储单元1131和至少一个第二存储单元1133。

第一存储单元1131中的每一个与所述数据接收单元的每一个连接相对应。

例如，数据接收装置与N个网络模块连接形成N个连接，则包括N个第一存储单元，每一个第一存储单元与N个连接中的每一个相对应。可选地，第一存储单元包括缓存器。

第二存储单元1133中的每一个与至少一个所述客户端的属性中的每一个相对应。

例如，客户端属性可以包括客户端的类型和客户端所在的区域。例如，假设对某一写字楼内的客户端进行监测，可以根据待监测客户端的类型分配第二存储单元，例如将写字楼的客户端分为三种类型：空调、摄像头、照明。则包括三个第二存储单元，分别存储三种不同类型的客户端的数据。

再例如，根据写字楼的楼层分配第二存储单元，对于21层的办公区域，分配21个第二存储单元，每一层的客户端的数据对应一个第二存储单元。

本领域技术人员根据以上示例可以明了，也可以根据客户端类型以及所在区域，或者其它客户端属性确定第二存储单元。可选地，第二存储单元包括缓存器。

本实用新型一具体实施方式，结合本实用新型其他实施方式的各个方面。如图2所示。本实用新型实施方式提供的数据接收服务器21，包括数据接收装置211和第一存储装置213以及控制装置216。

数据接收装置211，用于通过至少一个连接接收来自客户端数据。例如，数据接收装置211通过一连接连接至客户端，或者数据接收装置211连接至网络模块，网络模块再进一步连接至一个或多个客户端。

可选地,网络模块包括GPRS模块、3G/4G模块、Wi-Fi模块等。

可选地，客户端包括家用电器、电脑、可穿戴设备、各种传感器等可监测数据和/或需要进行控制的终端中的至少一种。

第一存储装置213，包括至少一个第一存储单元和至少一个第二存储单元。

第一存储单元中的每一个与数据接收单元的每一个连接相对应。

例如，数据接收装置与N个网络模块连接形成N个连接，则包括N个第一存储单元，每一个第一存储单元与N个连接中的每一个相对应。 可选地，第一存储单元包括缓存器。

第二存储单元中的每一个与至少一个所述客户端的属性中的每一个相对应。

例如，客户端属性可以包括客户端的类型和客户端所在的区域。例如，假设对某一写字楼内的客户端进行监测，可以根据待监测客户端的类型分配第二存储单元，例如将写字楼的客户端分为三种类型：空调、摄像头、照明。则包括三个第二存储单元，分别存储三种不同类型的客户端的数据。

再例如，根据写字楼的楼层分配第二存储单元，对于21层的办公区域，分配21个第二存储单元，每一层的客户端的数据对应一个第二存储单元。

本领域技术人员根据以上示例可以明了，也可以根据客户端类型以及所在区域，或者其它客户端属性确定第二存储单元。可选地，第二存储单元包括缓存器。

控制装置216，用于当第一存储单元存储的数据大于等于第一阈值A时或者第一存储单元对应的连接中断时，将第一存储单元存储的数据分配至与数据相对应的第二存储单元中。

例如，某一第一存储单元的存储的数据大于等于A时，或者该存储单元相应的连接中断时，此时将第一存储单元的数据存储至第二存储单元，例如第二存储单元与空调、摄像头、照明三种客户端类型相对应，则将第一存储单元存储的数据分别存储至对应客户端类型的第二存储单元。

在本实用新型一具体实施方式中，结合其他实施方式的各个方面。除了控制装置216之外，数据接收服务器还可以包括第二存储器215。

可选地，第二存储器215可以是本地服务器。控制装置216用于当 第二存储单元存储的数据大于等于第二阈值B时，将第二存储单元存储的数据保存至第二存储装置215中。

本实用新型一具体实施方式，提供数据处理系统包括如本实用新型各实施方式提供的数据接收服务器。

图3是本实用新型提供的数据处理系统的一实施例的结构示意图。

本实用新型一具体实施方式，结合本实用新型其他实施方式的各个方面。如图3所示，数据处理系统3包括数据接收服务器31和数据转发服务器33。

其中数据接收服务器31包括本实用新型各实施方式提供的数据接收服务器的各个方面。

图4是本实用新型提供的数据转发服务器的一实施例的结构示意图

如图4所示，数据转发服务器33包括第三存储单元331和第四存储单元333和转发控制单元335，

第三存储单元331，用于存储已建立连接的客户端。

第四存储单元333，用于存储已建立连接的网络模块，以及与监听已建立连接的网络模块的全部客户端。

转发控制单元335，用于根据转发模式，根据所述第三存储单元或所述第四存储单元将待转发的数据转发至已建立连接的客户端或监听已建立连接的网络模块的全部客户端。

转发模式包括第一转发模式和第二转发模式，第一转发模式包括将数据转发至已建立连接的客户端。第二转发模式包括将数据转发至已连接的网络模块，并进一步转发至监听该网络模块的全部客户端。

图5是本实用新型提供的数据处理系统的一实施例的结构示意图。本实用新型一具体实施方式提供的数据处理系统4包括数据接收服务器41和第三存储装置45，以及上传控制器43。

其中数据接收服务器41包括本实用新型各实施方式提供的数据接收服务器的各个方面。

上传控制器43，用于将第二存储装置中的新数据上传至第三存储装置45中，和/或将第二存储单元中的数据上传至第三存储装置45中。

在本实用新型提供的一具体实施方式中，第三存储装置45包括HDFS存储器。

图6是本实用新型提供的数据处理系统的一实施例的结构示意图。

本实用新型一具体实施方式，结合本实用新型各实施方式的各个方面。数据处理系统5包括数据接收服务器51、第三存储装置55、上传控制器53和数据解析装置57。

其中数据接收服务器51包括本实用新型各实施方式提供的数据接收服务器的各个方面。

上传控制器53，用于将第二存储装置中的新数据上传至第三存储装置55中，和/或将第二存储单元中的数据上传至第三存储装置55中。

在本实用新型提供的一具体实施方式中，第三存储装置55包括HDFS存储器。

图7是本实用新型提供的数据解析装置的一实施例的结构示意图。数据解析装置57如图7所示。

数据解析装置57包括数据接口单元571，解析数据分配单元573，以及至少一个解析数据处理单元575。

数据接口单元571，用于接收来自第三存储装置的待解析的数据。

解析数据分配单元573，用于根据所述解析数据处理单元的处理能力和/或数据负荷将待解析数据分配至所述至少一个解析数据处理单元。

解析数据处理单元575，用于解析待解析数据形成解析后的数据。

解析数据分配单元573能够合理调配解析资源，使得各解析处理单 元处理的数据量与处理能力相匹配，能够有效地减少数据拥塞，保证数据的准确性和安全性。

图8是本实用新型提供的数据处理系统的一实施例的结构示意图。

本实用新型一具体实施方式，结合本实用新型各实施方式的各个方面。数据处理系统6包括数据接收服务器61、第三存储装置65、上传控制器63、数据解析装置67、和第四存储装置69。

其中数据接收服务器61包括本实用新型各实施方式提供的数据接收服务器的各个方面。

上传控制器63，用于将第二存储装置中的新数据上传至第三存储装置65中，和/或将第二存储单元中的数据上传至第三存储装置65中。

在本实用新型提供的一具体实施方式中，第三存储装置65包括HDFS存储器。

数据解析装置67包括数据接口单元，解析数据分配单元，以及至少一个解析数据处理单元。

数据接口单元，用于接收来自第三存储装置的待解析的数据。

解析数据分配单元，用于根据所述解析数据处理单元的处理能力和/或数据负荷将待解析数据分配至所述至少一个解析数据处理单元。

解析数据处理单元，用于解析待解析数据形成解析后的数据。

解析数据分配单元能够合理调配解析资源，使得各解析处理单元处理的数据量与处理能力相匹配，能够有效地减少数据拥塞，保证数据的准确性和安全性。

第四存储装置69用于存储所述解析后的数据，所述客户端能够对第四存储装置的数据进行处理。

例如，第四存储包含但不限于SQL等数据库系统。

综上所述，本实用新型具体实施方式提供的方案能够提高数据处理 的效率，合理分配系统资源，进而提高数据的安全性。

本文中所描述的功能可在硬件、由处理器执行的软件、固件或其任何组合中实施。如果在由处理器执行的软件中实施，那么可将功能作为一或多个指令或代码存储于计算机可读媒体上或经由计算机可读媒体予以传输。其它实例及实施方案在本实用新型及所附权利要求书的范围及精神内。举例来说，归因于软件的性质，上文所描述的功能可使用由处理器、硬件、固件、硬连线或这些中的任何者的组合执行的软件实施。此外，各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，可以为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为控制装置的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本实用新型的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机 设备(可为个人计算机、服务器或者网络设备等)执行本实用新型各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本实用新型的实施例而已，并不用于限制本实用新型，对于本领域的技术人员来说，本实用新型可以有各种更改和变化。凡在本实用新型的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本实用新型的权利要求范围之内。