一种基于大数据的情报处理方法及装置与流程

本发明是大数据情报处理技术领域，特别是关于一种基于大数据的情报处理方法及装置。

背景技术：

大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

现有技术cn104156465b公开了一种实时网页同步及后台分布式数据存储系统，其包括：所述大数据存储平台用于采用分布式存储结构对写入的非结构化数据，以任务为元数据模型进行结构化存储；所述实时数据推送模块连接至所述大数据存储平台，并且与所述多个客户端建立socket长链接通道，当检测到所述大数据存储平台内的数据发生修改时，自动将与修改相关的数据推送至所述每个客户端；每个所述客户端用于接收来自所述实时数据推送模块的修改相关的数据，并在登录指定url地址后，在每个所述客户端的网页实时同步显示与修改相关的数据。

现有技术cn105516355b公开了一种基于喷泉码的智能电能表误差大数据安全存储装置及方法，所述装置包括依次连接的智能电能表自助误差校准装置、hdfs客户端、hadoop大数据存储平台；所述智能电能表自助误差校准装置，用于采集被测智能电能表数据；所述hdfs客户端用于对采集到的智能电能表数据进行预处理，并对预处理后的数据编译码；所述hadoop大数据存储平台用于对智能电能表误差大数据进行分布式存储。

现有技术cn108280878a公开了一种物质文化遗产区块链多模态数字身份构建装置及方法，对待进行区块链多模态数字身份构建的物质文化遗产对象进行三维模型构建，获取高光谱数据及基础描述数据；将三类模态数据合并生成多模态数字身份并在分布式大数据存储平台上保存和管理生成的多模态数字身份文件；对每个创建的物质文化遗产对象身份数据生成一个哈希值，并将每个物质文化遗产对象身份数据的哈希值放在私有链管理单元管理；将每次新建的物质文化遗产对象数字身份的哈希值跟已有的所有哈希值聚合成一个文件，对聚合后的物质文化遗产对象数字身份文件进行哈希处理，并将哈希处理的结果作为当前私有链整体的数据指纹挂载到公有链上。

上述现有技术都涉及了大数据存储平台的设计以及大数据处理的算法设计。但是发明人发现，目前对于大数据算法的设计已经非常详尽，对于大数据算法本身的改进已经十分有限，以通过改变算法的方式来提高大数据分析的效率已经十分困难。在这种情况下，数据传输过程中的许多问题就非常值得关注，提高数据传输效率将有利于更快速的收集更多的数据和情报，更快速的积累到足够的分析样本，这可以变相提高数据分析效率。但遗憾的是，上述现有技术并没有关注到这个问题。

公开于该背景技术部分的信息仅仅旨在增加对本发明的总体背景的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域一般技术人员所公知的现有技术。

技术实现要素：

本发明的目的在于提供一种基于大数据的情报处理方法及装置，其能够克服现有技术的缺陷。

为实现上述目的，本发明提供了一种基于大数据的情报处理方法，其特征在于：基于大数据的情报处理方法包括如下步骤：

由移动式情报收集终端收集情报；

由移动式情报收集终端向大数据存储平台发送接入请求消息；

在由移动式情报收集终端向大数据存储平台发送接入请求消息之后，由移动式情报收集终端向大数据存储平台连续发送移动式情报收集终端的地理位置信息；

由大数据存储平台基于连续接收到的移动式情报收集终端的地理位置信息，确定移动式情报收集终端的移动速度；

如果移动式情报收集终端的移动速度大于门限速度，则向移动式情报收集终端发送第一测量报告命令；

如果移动式情报收集终端接收到第一测量报告命令，则以第一时间间隔向大数据存储平台发送测量报告；

如果移动式情报收集终端的移动速度小于门限速度，则向移动式情报收集终端发送第二测量报告命令；

如果移动式情报收集终端接收到第二测量报告命令，则以第二时间间隔向大数据存储平台发送测量报告，其中，第一时间间隔小于第二时间间隔；

由大数据存储平台基于接收到的接入请求消息，判断要求接入大数据存储平台的移动式情报收集终端的数量；

由大数据存储平台基于测量报告，判断数据传输信道的质量；

如果要求接入大数据存储平台的移动式情报收集终端的数量大于大数据存储平台所能容纳的移动式情报收集终端的数量，则由大数据存储平台随机选择第一数量的移动式情报收集终端，并向第一数量的移动式情报收集终端发送接入确认信息。

在一优选的实施方式中，其中，第一数量等于大数据存储平台所能容纳的移动式情报收集终端的数量，基于大数据的情报处理方法包括如下步骤：

当移动式情报收集终端接收到接入确认信息之后，向大数据存储平台发送所收集的情报。

在一优选的实施方式中，其中，测量报告中包括由移动式情报收集终端接收的参考信号的信干噪比，其中，参考信号是由大数据存储平台广播的；基于大数据的情报处理方法包括如下步骤：

由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间；

由大数据存储平台向其它终端传输再次接入命令消息，其中，再次接入命令消息包括随机等待时间，并且其中，其它终端是已经向大数据存储平台发送接入请求消息的、但不属于第一数量的移动式情报收集终端的移动式情报收集终端；

在接收到再次接入命令消息之后，由其它终端在随机等待时间之后，再次向大数据存储平台发送接入请求消息。

在一优选的实施方式中，由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间包括如下步骤：

如果数据传输信道的质量大于质量门限，则生成第一随机等待时间；

如果数据传输信道的质量小于质量门限，则生成第二随机等待时间；

其中，第一随机等待时间小于第二随机等待时间。

在一优选的实施方式中，基于大数据的情报处理方法包括如下步骤：

由大数据存储平台向可视化部门以及大数据分析部门发送所收集的情报以便为情报的收集和处理提供支撑服务。

本发明还提供了一种基于大数据的情报处理装置，其特征在于：基于大数据的情报处理装置包括：

用于由移动式情报收集终端收集情报的单元；

用于由移动式情报收集终端向大数据存储平台发送接入请求消息的单元；

用于在由移动式情报收集终端向大数据存储平台发送接入请求消息之后，由移动式情报收集终端向大数据存储平台连续发送移动式情报收集终端的地理位置信息的单元；

用于由大数据存储平台基于连续接收到的移动式情报收集终端的地理位置信息，确定移动式情报收集终端的移动速度的单元；

用于如果移动式情报收集终端的移动速度大于门限速度，则向移动式情报收集终端发送第一测量报告命令的单元；

用于如果移动式情报收集终端接收到第一测量报告命令，则以第一时间间隔向大数据存储平台发送测量报告的单元；

用于如果移动式情报收集终端的移动速度小于门限速度，则向移动式情报收集终端发送第二测量报告命令的单元；

用于如果移动式情报收集终端接收到第二测量报告命令，则以第二时间间隔向大数据存储平台发送测量报告的单元，其中，第一时间间隔小于第二时间间隔；

用于由大数据存储平台基于接收到的接入请求消息，判断要求接入大数据存储平台的移动式情报收集终端的数量的单元；

用于由大数据存储平台基于测量报告，判断数据传输信道的质量的单元；

用于如果要求接入大数据存储平台的移动式情报收集终端的数量大于大数据存储平台所能容纳的移动式情报收集终端的数量，则由大数据存储平台随机选择第一数量的移动式情报收集终端，并向第一数量的移动式情报收集终端发送接入确认信息的单元。

在一优选的实施方式中，其中，第一数量等于大数据存储平台所能容纳的移动式情报收集终端的数量，基于大数据的情报处理装置包括：

用于当移动式情报收集终端接收到接入确认信息之后，向大数据存储平台发送所收集的情报的单元。

在一优选的实施方式中，其中，测量报告中包括由移动式情报收集终端接收的参考信号的信干噪比，其中，参考信号是由大数据存储平台广播的；基于大数据的情报处理装置包括：

用于由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间的单元；

用于由大数据存储平台向其它终端传输再次接入命令消息的单元，其中，再次接入命令消息包括随机等待时间，并且其中，其它终端是已经向大数据存储平台发送接入请求消息的、但不属于第一数量的移动式情报收集终端的移动式情报收集终端；

用于在接收到再次接入命令消息之后，由其它终端在随机等待时间之后，再次向大数据存储平台发送接入请求消息的单元。

在一优选的实施方式中，由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间包括如下步骤：

用于如果数据传输信道的质量大于质量门限，则生成第一随机等待时间的单元；

用于如果数据传输信道的质量小于质量门限，则生成第二随机等待时间的单元；

其中，第一随机等待时间小于第二随机等待时间。

在一优选的实施方式中，基于大数据的情报处理装置包括：

用于由大数据存储平台向可视化部门以及大数据分析部门发送所收集的情报以便为情报的收集和处理提供支撑服务的单元。

与现有技术相比，本发明具有如下优点：如前所述，现有技术基本上都涉及了大数据存储平台的设计以及大数据处理的算法设计。但是需要注意的是，目前对于大数据算法本身的改进已经十分有限，以通过改变算法的方式来提高大数据分析的效率已经十分困难。在这种情况下，本发明设计了一种新的数据收集终端与大数据存储平台之间的信息交互方法，本发明的方法根据移动终端的速度可变的调整测量报告的传输，同时，根据测量报告来设计移动终端传输的随机等待时间，防止传输信道的拥挤。本发明的方法提高了数据传输效率，有利于更快速的收集更多的数据和情报，更快速的积累到足够的分析样本，可以变相提高数据分析效率。

附图说明

图1是根据本发明一实施方式的方法流程图。

具体实施方式

下面结合附图，对本发明的具体实施方式进行详细描述，但应当理解本发明的保护范围并不受具体实施方式的限制。

除非另有其它明确表示，否则在整个说明书和权利要求书中，术语“包括”或其变换如“包含”或“包括有”等等将被理解为包括所陈述的元件或组成部分，而并未排除其它元件或其它组成部分。

图1是根据本发明一实施方式的方法流程图。如图所示，本发明的方法包括：

步骤101：由移动式情报收集终端收集情报；

步骤102：由移动式情报收集终端向大数据存储平台发送接入请求消息；

步骤103：在由移动式情报收集终端向大数据存储平台发送接入请求消息之后，由移动式情报收集终端向大数据存储平台连续发送移动式情报收集终端的地理位置信息；

步骤104：由大数据存储平台基于连续接收到的移动式情报收集终端的地理位置信息，确定移动式情报收集终端的移动速度；

步骤105：如果移动式情报收集终端的移动速度大于门限速度，则向移动式情报收集终端发送第一测量报告命令；

步骤106：如果移动式情报收集终端接收到第一测量报告命令，则以第一时间间隔向大数据存储平台发送测量报告；

步骤107：如果移动式情报收集终端的移动速度小于门限速度，则向移动式情报收集终端发送第二测量报告命令；

步骤108：如果移动式情报收集终端接收到第二测量报告命令，则以第二时间间隔向大数据存储平台发送测量报告，其中，第一时间间隔小于第二时间间隔；

步骤109：由大数据存储平台基于接收到的接入请求消息，判断要求接入大数据存储平台的移动式情报收集终端的数量；

步骤110：由大数据存储平台基于测量报告，判断数据传输信道的质量；

步骤111：如果要求接入大数据存储平台的移动式情报收集终端的数量大于大数据存储平台所能容纳的移动式情报收集终端的数量，则由大数据存储平台随机选择第一数量的移动式情报收集终端，并向第一数量的移动式情报收集终端发送接入确认信息。

在一优选的实施方式中，其中，第一数量等于大数据存储平台所能容纳的移动式情报收集终端的数量，基于大数据的情报处理方法包括如下步骤：

当移动式情报收集终端接收到接入确认信息之后，向大数据存储平台发送所收集的情报。

在一优选的实施方式中，其中，测量报告中包括由移动式情报收集终端接收的参考信号的信干噪比，其中，参考信号是由大数据存储平台广播的；基于大数据的情报处理方法包括如下步骤：

由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间；

由大数据存储平台向其它终端传输再次接入命令消息，其中，再次接入命令消息包括随机等待时间，并且其中，其它终端是已经向大数据存储平台发送接入请求消息的、但不属于第一数量的移动式情报收集终端的移动式情报收集终端；

在接收到再次接入命令消息之后，由其它终端在随机等待时间之后，再次向大数据存储平台发送接入请求消息。

在一优选的实施方式中，由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间包括如下步骤：

如果数据传输信道的质量大于质量门限，则生成第一随机等待时间；

如果数据传输信道的质量小于质量门限，则生成第二随机等待时间；

其中，第一随机等待时间小于第二随机等待时间。

在一优选的实施方式中，基于大数据的情报处理方法包括如下步骤：

由大数据存储平台向可视化部门以及大数据分析部门发送所收集的情报以便为情报的收集和处理提供支撑服务。

本发明还提供了一种基于大数据的情报处理装置，其特征在于：基于大数据的情报处理装置包括：

用于由移动式情报收集终端收集情报的单元；

用于由移动式情报收集终端向大数据存储平台发送接入请求消息的单元；

用于在由移动式情报收集终端向大数据存储平台发送接入请求消息之后，由移动式情报收集终端向大数据存储平台连续发送移动式情报收集终端的地理位置信息的单元；

用于由大数据存储平台基于连续接收到的移动式情报收集终端的地理位置信息，确定移动式情报收集终端的移动速度的单元；

用于如果移动式情报收集终端的移动速度大于门限速度，则向移动式情报收集终端发送第一测量报告命令的单元；

用于如果移动式情报收集终端接收到第一测量报告命令，则以第一时间间隔向大数据存储平台发送测量报告的单元；

用于如果移动式情报收集终端的移动速度小于门限速度，则向移动式情报收集终端发送第二测量报告命令的单元；

用于如果移动式情报收集终端接收到第二测量报告命令，则以第二时间间隔向大数据存储平台发送测量报告的单元，其中，第一时间间隔小于第二时间间隔；

用于由大数据存储平台基于接收到的接入请求消息，判断要求接入大数据存储平台的移动式情报收集终端的数量的单元；

用于由大数据存储平台基于测量报告，判断数据传输信道的质量的单元；

用于如果要求接入大数据存储平台的移动式情报收集终端的数量大于大数据存储平台所能容纳的移动式情报收集终端的数量，则由大数据存储平台随机选择第一数量的移动式情报收集终端，并向第一数量的移动式情报收集终端发送接入确认信息的单元。

在一优选的实施方式中，其中，第一数量等于大数据存储平台所能容纳的移动式情报收集终端的数量，基于大数据的情报处理装置包括：

用于当移动式情报收集终端接收到接入确认信息之后，向大数据存储平台发送所收集的情报的单元。

在一优选的实施方式中，其中，测量报告中包括由移动式情报收集终端接收的参考信号的信干噪比，其中，参考信号是由大数据存储平台广播的；基于大数据的情报处理装置包括：

用于由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间的单元；

用于由大数据存储平台向其它终端传输再次接入命令消息的单元，其中，再次接入命令消息包括随机等待时间，并且其中，其它终端是已经向大数据存储平台发送接入请求消息的、但不属于第一数量的移动式情报收集终端的移动式情报收集终端；

用于在接收到再次接入命令消息之后，由其它终端在随机等待时间之后，再次向大数据存储平台发送接入请求消息的单元。

在一优选的实施方式中，由大数据存储平台基于判断得到的数据传输信道的质量，生成随机等待时间包括如下步骤：

用于如果数据传输信道的质量大于质量门限，则生成第一随机等待时间的单元；

用于如果数据传输信道的质量小于质量门限，则生成第二随机等待时间的单元；

其中，第一随机等待时间小于第二随机等待时间。

在一优选的实施方式中，基于大数据的情报处理装置包括：

用于由大数据存储平台向可视化部门以及大数据分析部门发送所收集的情报以便为情报的收集和处理提供支撑服务的单元。

本领域技术人员将理解，信息和信号可使用各种不同技术和技艺中的任何一种来表示。例如，贯穿上面描述始终可能被述及的数据、指令、命令、信息、信号、位（比特）、码元、和码片可由电压、电流、电磁波、磁场或磁粒子、光场或光粒子、或其任何组合来表示。

本领域技术人员将进一步领会，结合本文公开所描述的各种解说性逻辑框、模块、电路、和算法步骤可被实现为电子硬件、计算机软件、或两者的组合。为清楚地解说硬件与软件的这一可互换性，以上已经以其功能性的形式一般化地描述了各种解说性组件、框、模块、电路、和步骤。此类功能性是被实现为硬件还是软件取决于具体应用和加诸于整体系统的设计约束。技术人员可针对每种特定应用以不同方式来实现所描述的功能性，但此类实现决策不应被解读为致使脱离本公开的范围。

结合本文公开描述的各种解说性逻辑框、模块、以及电路可用被设计成用于执行本文中描述的功能的通用处理器、数字信号处理器（dsp）、专用集成电路（asic）、现场可编程门阵列（fpga）或其他可编程逻辑器件、分立的门或晶体管逻辑、分立的硬件组件、或其任何组合来实现或执行。通用处理器可以是微处理器，但在替换方案中，处理器可以是任何常规的处理器、控制器、微控制器、或状态机。处理器还可以被实现为计算设备的组合，例如dsp与微处理器的组合、多个微处理器、与dsp核心协作的一个或更多个微处理器、或任何其他此类配置。

结合本文公开描述的方法或算法的步骤可直接在硬件中、在由处理器执行的软件模块中、或在这两者的组合中实施。软件模块可驻留在ram存储器、闪存、rom存储器、eprom存储器、eeprom存储器、寄存器、硬盘、可移动盘、cd-rom、或本领域中所知的任何其他形式的存储介质中。示例性存储介质耦合到处理器以使得该处理器能从/向该存储介质读写信息。在替换方案中，存储介质可以被整合到处理器。处理器和存储介质可驻留在asic中。asic可驻留在用户终端中。在替换方案中，处理器和存储介质可作为分立组件驻留在用户终端中。

在一个或更多个示例性设计中，所描述的功能可以在硬件、软件、固件、或其任何组合中实现。如果在软件中实现，则各功能可以作为一条或多条指令或代码存储在计算机可读介质上或藉其进行传送。计算机可读介质包括计算机存储介质和通信介质两者，其包括促成计算机程序从一地向另一地转移的任何介质。存储介质可以是能被通用或专用计算机访问的任何可用介质。作为示例而非限定，此类计算机可读介质可以包括ram、rom、eeprom、cd-rom或其他光盘存储、磁盘存储或其他磁存储设备、或能被用来携带或存储指令或数据结构形式的期望程序代码手段且能被通用或专用计算机、或者通用或专用处理器访问的任何其他介质。另外，任何连接也被正当地称为计算机可读介质。例如，如果软件是使用同轴电缆、光纤电缆、双绞线、数字订户线（dsl）、或诸如红外、无线电、以及微波之类的无线技术从web站点、服务器、或其他远程源传送的，那么该同轴电缆、光纤电缆、双绞线、dsl、或诸如红外、无线电、以及微波之类的无线技术就被包括在介质的定义之中。如本文中所使用的，盘（disk）和碟（disc）包括压缩碟（cd）、激光碟、光碟、数字多用碟（dvd）、软盘和蓝光碟，其中盘（disk）往往以磁的方式再现数据，而碟（disc）用激光以光学方式再现数据。以上组合也应被包括在计算机可读介质的范围内。

前述对本发明的具体示例性实施方案的描述是为了说明和例证的目的。这些描述并非想将本发明限定为所公开的精确形式，并且很显然，根据上述教导，可以进行很多改变和变化。对示例性实施例进行选择和描述的目的在于解释本发明的特定原理及其实际应用，从而使得本领域的技术人员能够实现并利用本发明的各种不同的示例性实施方案以及各种不同的选择和改变。本发明的范围意在由权利要求书及其等同形式所限定。