一种大数据平台系统的制作方法

本发明涉及大数据技术领域，特别是涉及一种大数据平台系统。

背景技术：

随着对技术的发展，在经济生活或者工业生产中产生的数据量也越来越大。为了充分利用这些数据，以进一步加快技术的进步或者更好的服务于人们的生活，催生了大数据系统。

当目标设备向大数据平台系统发送数据请求时，大数据平台系统会根据数据请求，提取目标数据，然后将目标数据发送给目标设备。但是，在实际应用中，如果大数据平台接收的数据请求数量较多，就会产生目标数据发送队列，导致目标数据的发送速度变慢。

因此，现有技术中存在目标数据的传输速度较慢的技术问题。

技术实现要素：

本发明实施例的目的在于提供一种大数据平台系统，以实现提高目标数据的传输速度的目的。具体技术方案如下：

为达到上述目的，本发明实施例提供了一种大数据平台系统，所述系统包括：数据采集单元、接收单元、数据发送单元以及中央控制单元，其中，所述数据采集单元、所述接收单元、所述中央控制单元以及所述数据发送单元依次连接，所述中央控制单元还与测试单元连接；

所述数据采集单元用于，根据所述中央控制单元的指令采集数据；

所述接收单元用于，接收数据请求和接收数据采集单元发送的数据；

所述中央控制单元，用于根据接收单元接收的数据请求，选择需要发送的目标数据，并向所述测试单元发送测试指令；

所述测试单元，用于根据所述中央控制单元发送的测试指令，测试无线传输通道和有线传输通道的传输速度，并将测试结果发送给所述数据发送单元；

所述数据发送单元，用于根据所述测试单元的测试结果，选择传输速度最快的传输通道将目标数据发送给目标设备。

可选的，所述数据采集单元，具体用于：

根据所述中央控制单元的指令采集指定类型、指定数据量、指定设备的数据；

在采集所述数据后，按照预设格式对所述数据进行转化，其中，所述预设格式为键值对格式。

可选的，所述测试单元，具体用于：

在接收到所述中央控制单元发送的测试指令后，在第一时刻同时使用有线传输通道和无线传输通道，向所述目标设备发送预设数据量的数据包，并接收所述目标设备发送的接收完成的响应消息，根据所述响应消息对应的第二时刻与所述第一时刻之间的时长，根据有线传输通道和无线传输通道分别对应的时长，测试出无线传输通道和有线传输通道的传输速度，并将测试结果发送给所述数据发送单元;

可选的，所述数据发送单元，包括分配子单元、数据有线发送子单元和数据无线发送子单元，其中，

所述分配子单元，用于将目标数据插入到传输速度最高的传输通道对应的发送队列的最前端；

有线发送子单元，用于，将目标数据压缩后，利用有线传输通道将目标数据发送给目标设备；

无线发送子单元，用于，将目标数据压缩后，利用无线传输通道将目标数据发送给目标设备。

可选的，所述数据请求中还包括目标数据的优先级信息；

所述分配子单元，用于在当前发送队列中若没有比所述目标数据的优先级更高的数据时，将目标数据插入到传输速度最高的传输通道对应的发送队列的最前端；

可选的，所述系统还包括：显示单元，所述显示单元用于在所述测试单元测试无线传输通道和有线传输通道的传输速度均低于预设阈值的情况下，将无线传输通道和有线传输通道的传输速度，以及传输耗时显示出来。

本发明实施例提供了一种大数据平台系统，所述系统包括：数据采集单元、接收单元、数据发送单元以及中央控制单元，其中，所述数据采集单元、所述接收单元、所述中央控制单元以及所述数据发送单元依次连接，所述中央控制单元还与测试单元连接；所述数据采集单元用于，根据所述中央控制单元的指令采集数据；所述接收单元用于，接收数据请求和接收数据采集单元发送的数据；所述中央控制单元，用于根据接收单元接收的数据请求，选择需要发送的目标数据，并向所述测试单元发送测试指令；所述测试单元，用于根据所述中央控制单元发送的测试指令，测试无线传输通道和有线传输通道的传输速度，并将测试结果发送给所述数据发送单元；所述数据发送单元，用于根据所述测试单元的测试结果，选择传输速度最快的传输通道将目标数据发送给目标设备。

应用本发明实施例提供的一种大数据平台系统，在当前传输通道的传输速度较慢的情况下，使用另一传输通道，可以提高目标数据的传输速度。当然，实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种大数据平台系统。

图2为本发明实施例提供的另一种大数据平台系统。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例提供的一种大数据平台系统，如图1所示，该系统包括：数据采集单元11、接收单元12、数据发送单元15以及中央控制单元13，其中，所述数据采集单元11、所述接收单元12、所述中央控制单元13以及所述数据发送单元15依次连接，所述中央控制单元13还与测试单元14连接。

所述数据采集单元11用于，根据所述中央控制单元13的指令采集数据。

具体的，所述数据采集单元11，具体用于：根据所述中央控制单元13的指令采集指定类型、指定数据量、指定设备的数据；在采集所述数据后，按照预设格式对所述数据进行转化，其中，所述预设格式为键值对格式。

例如，数据采集单元11采集的数据为用户id，则可以将数据转化为预设格式，如：key=userid&value=10023，其中，key=userid为，该条数据的关键字为用户id；value=10023为，该条数据对应的用户id的值为10023。

需要说明的是，预设格式包括但不仅限于键值对格式，本发明实施例再此不对其作出限定。

所述接收单元12用于，接收数据请求和接收数据采集单元11发送的数据。

具体的，如果接收到的数据请求为：提取数据a。

在实际应用中，接收单元12还可以接收数据采集单元11发送的数据，如“key=userid&value=10023”。

所述中央控制单元13，用于根据接收单元12接收的数据请求，选择需要发送的目标数据，并向所述测试单元14发送测试指令。

中央控制单元13根据数据请求“提取数据a”，提取出数据a，然后想测试单元14发送测试指令。

所述测试单元14，用于根据所述中央控制单元13发送的测试指令，测试无线传输通道和有线传输通道的传输速度，并将测试结果发送给所述数据发送单元15。

具体的，所述测试单元14，具体用于：在接收到所述中央控制单元13发送的测试指令后，在第一时刻同时使用有线传输通道和无线传输通道，向所述目标设备发送预设数据量的数据包，并接收所述目标设备发送的接收完成的响应消息，根据所述响应消息对应的第二时刻与所述第一时刻之间的时长，根据有线传输通道和无线传输通道分别对应的时长，测试出无线传输通道和有线传输通道的传输速度，并将测试结果发送给所述数据发送单元15。

测试单元14在12:00:00时刻，通过无线传输通道和有线传输通道，向目标设备发送大小为10m测试数据包。假设中央控制单元13在12:00:04时刻接收到无线传输通道返回的接收完成的响应消息；在12:00:08时刻接收到有线传输通道返回的接收完成的响应消息。将有线传输通道的速度慢于无线传输通道的速度的测试结果发送给数据发送单元15。

需要说明的是，目标设备为发送数据请求的设备。

所述数据发送单元15，用于根据所述测试单元14的测试结果，选择传输速度最快的传输通道将目标数据发送给目标设备。

具体的，所述数据发送单元15，包括分配子单元、数据有线发送子单元和数据无线发送子单元，其中，所述分配子单元，用于将目标数据插入到传输速度最高的传输通道对应的发送队列的最前端；有线发送子单元，用于，将目标数据压缩后，利用有线传输通道将目标数据发送给目标设备；无线发送子单元，用于，将目标数据压缩后，利用无线传输通道将目标数据发送给目标设备。

由于有线传输通道的速度慢于无线传输通道的速度，因此分配子单元将目标数据分配给无线发送子单元，无线发送子单元将目标数据压缩后，使用无线传输通道传输目标数据。

在实际应用中，所述数据请求中还包括目标数据的优先级信息；所述分配子单元，用于在当前发送队列中若没有比所述目标数据的优先级更高的数据时，将目标数据插入到传输速度最高的传输通道对应的发送队列的最前端。

例如，假设优先级包括：最低级1级、一般等级2级和最高等级3级。数据请求中包括目标数据的优先级信息为，优先级3级，说明该数据是急需数据。

如果无线信道发送队列中不存在优先级高于目标数据的数据时，将目标数据插入到无线信道对应的发送队列中的最前端，无线信道传输完当前数据后，就开始传输目标数据。

应用本发明实施例，将目标数据插入发送队列的最前端，可以进一步提高目标数据的传输速度。

图2为本发明实施例提供的另一种大数据平台系统，如图2所示，本发明图2所示实施例在本发明图1所示实施例的基础上，增加了显示单元16，所述显示单元16用于在所述测试单元14测试无线传输通道和有线传输通道的传输速度均低于预设阈值的情况下，将无线传输通道和有线传输通道的传输速度，以及传输耗时显示出来。

在实际应用中，大数据平台系统，还包括显示单元16，显示单元16可以是显示器，可以显示各个传输通道的传输速度，各个通道的发送队列包含哪些数据，各个发送队列包含的数据的数据量以及优先级，以及传输完成该数据需要的时间。

需要强调的是，有线传输通道包括但不见限于同轴电缆、光缆、双绞线等；无线传输通道包括但不仅限于无线电、光波等。

应用本方图2所示实施例，用户可以直观的了解大数据平台系统的工作状态。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。