大数据压成提取方法与流程

本发明涉及大数据信息提取技术领域，具体为大数据压成提取方法。

背景技术：

大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。因此，大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。随着全球化企业竞争的加剧，基于大数据技术的智能全媒体云呼叫中心得到越多越多企业的青睐。通过该平台，企业无需投入大量的资金建设呼叫中心的软硬件，而是通过在业务系统中快速从云端嵌入呼叫中心能力，快速搭建呼叫中心系统。为保证该云呼叫中心平台的服务能力，需要不断地优化其平台大数据的采集、存储和提取的方法。

1.现有技术中公开了一种大数据量文件处理的方法及系统(cn102456005a)，其涉及的大数据处理系统，在客户端提交查询大数据文件的任务后，通过应用服务器异步处理，提供所查询大数据文件的压缩文件给用户下载，通过该系统，客户端可以同时提交并下载多个大数据文件查询任务，提高了客户端提取数据的效率。

但是其不能针对客户的身份进行准确的判断，容易将需要对该客户保密的信息提供给客户，另外其不能针对性地为客户自动搜索与其需要信息相关的其它信息供客户参考。

2.现有技术中还公开了一种大数据写入、读取速度耦合的方法、设备及存储设备(cn107885803a)，其涉及的大数据读取方法中将客户提供的读取指令传输到各个节点，在节点处提取指令中需要读取的数据特征，然后根据数据特征查询索引表，为客户提供多个满足需求的信息供其参考选择，但是其不能针对客户的身份进行准确的判断，容易将客户未达到读取权限的信息提供给客户

技术实现要素：

本发明的目的在于提供大数据压成提取方法，以解决上述背景技术中遇到的问题。

为实现上述目的，本发明提供如下技术方案：大数据压成提取方法，包括，大数据云端服务中心，中心控制模块，客群管理模块，权限管理模块，用户终端以及管理终端；

其中，所述大数据云端服务中心用于存储企业的数据信息供客户检索和提取；

所述用户终端通过中心控制模块与管理终端之间建立交互通道，所述用户终端用于提供客户提取数据的注册、登录和实时交互平台，所述管理终端用于向客群管理模块提供客户信息；

所述客群管理模块用于采集和存储客户的个人信息及身份特征，并将新采集到的客户信息与客户存储数据库进行比对，分析；

所述权限管理模块用于数据所有人设定其数据信息读取权限等级，并提供数据访问密码登录平台和ip屏蔽。

优选的，还包括，看门狗模块，

所述看门狗模块用于检测中心控制模块程序的运行状态。

优选的，还包括，通讯模块，

所述通讯模块分别与中心控制模块、用户终端和管理终端双向信号连接。

优选的，所述大数据云端服务中心包括数据库单元和索引单元，

其中，所述数据库单元用于存储各个企业相关的数据信息；

所述索引单元用于将所述数据库单元中存储的数据进行分类，并提供数据关键词目录。

优选的，所述客群管理模块包括客群采集单元和存储单元，

其中，所述客群采集单元用于采集客户通过用户终端输入的个人注册信息和提取数据的检索信息，同时采集用户终端与管理终端交互过程中产生的关于客户身份特征的关键词；

所述存储单元用于存储客户个人信息及身份特征。

优选的，所述客群管理模块还包括身份识别单元，所述身份识别单元用于进行新采集的客户信息与存储的客户信息之间的比对。

优选的，所述权限管理模块包括权限设定单元，所述权限设定单元用于数据信息所有人针对自身企业的相关数据信息进行划分提取权限等级，存储设定的权限等级作为比对项，并对客群管理模块提供客户身份的权限进行识别。

优选的，所述权限管理模块还包括密匙单元和防火墙单元，

其中，所述密匙单元用于客户达不到数据提取权限时提供密码登录平台；所述防火墙单元用于预设所述密匙单元试探密码次数的上限，且当密码试探输入次数超过上限时对用户终端的ip进行屏蔽。

优选的，所述管理终端信号连接有智能机器人模块，所述智能机器人模块用于同用户终端的使用客户进行在线交互。

优选的，所述用户终端包括webrtc单元和用户app，

其中，所述webrtc单元用于提供网页浏览器构架下的语音对话和视频对话平台；

所述用户app为安装在手机和电脑上的软件，用于提供客户注册、登录数据提取平台，并提供在线实时交互平台。

与现有技术相比，本发明的有益效果是：

1、建立用户终端与管理终端之间的交互通道，同时利用客群管理模块对客户的个人信息和提取数据的关键词进行采集、分析、存储，然后通过大数据云端服务中心针对性地为客户提供符合其身份特征的且与其需要提取数据关键词直接相关和间接相关的信息，以便于客户择优选择，大大丰富了客户获得的信息量。

2、通过权限管理模块设定数据的提取权限，当客户的身份特征达不到其提取信息的权限时，则提供密码访问窗口，客户通过向信息所有人获得密码，完成登录并提取信息，若客户无法获得密码，而采取试探密码的方式登录，超过试探预设次数时，则屏蔽该客户的ip，同时将该客户的相关信息传送至管理终端进行安全判断，起到保护数据所有人信息安全的作用，增强了数据信息投放的针对性，为企业间需求合作提供更加稳定、便捷的手段。

附图说明

图1为本发明原理结构框架图；

图2为本发明大数据云端服务中心结构内部原理框架图；

图3为本发明客群管理模块内部原理框架图；

图4为本发明权限管理模块内部原理框架图；

图5为用户终端内部原理框架图。

图中：1-大数据云端服务中心；2-中心控制模块；3-客群管理模块；4-权限管理模块；5-看门狗模块；6-通讯模块；7-用户终端；8-管理终端；9-智能机器人模块；101-数据库单元；102-索引单元；301-客群采集单元；302-身份识别单元；303-存储单元；401-权限设定单元；402-防火墙单元；403-密匙单元；701-webrtc单元；702-用户app。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1-5，本发明提供一种技术方案：大数据压成提取方法，包括，大数据云端服务中心1，中心控制模块2，客群管理模块3，权限管理模块4，用户终端7以及管理终端8；

其中，大数据云端服务中心1用于存储企业的数据信息供客户检索和提取；

用户终端7通过中心控制模块2与管理终端8之间建立交互通道，用户终端7用于提供客户提取数据的注册、登录和实时交互平台，管理终端8用于向客群管理模块3提供客户信息；

客群管理模块3用于采集和存储客户的个人信息及身份特征，并将新采集到的客户信息与客户存储数据库进行比对，分析；

权限管理模块4用于数据所有人设定其数据信息读取权限等级，并提供数据访问密码登录平台和ip屏蔽。

还包括，看门狗模块5，

看门狗模块5用于检测中心控制模块2程序的运行状态，当看门狗模块5不能定时获得中心控制模块2的反馈信息时，则给出复位信号，使得中心控制模块2进行运行程序的重启，达到防止中心控制模块2程序运行出现死循环。

还包括，通讯模块6

通讯模块6分别与中心控制模块2、用户终端7和管理终端8双向信号连接，通讯模块6采用网络技术实现用户终端7和管理终端8之间的实时通信。

大数据云端服务中心1包括数据库单元101和索引单元102，

其中，数据库单元101用于存储各个企业相关的数据信息；

索引单元102用于将数据库单元101中存储的数据进行分类，并提供数据关键词目录。

客群管理模块3包括客群采集单元301和存储单元303，

其中，客群采集单元301用于采集客户通过用户终端7输入的个人注册信息和提取数据的检索信息，同时采集用户终端7与管理终端8交互过程中产生的关于客户身份特征的关键词；

存储单元303用于存储客户个人信息及身份特征。

客群管理模块3还包括身份识别单元302，身份识别单元302用于进行新采集的客户信息与存储的客户信息之间的比对。

权限管理模块4包括权限设定单元401，权限设定单元401用于数据信息所有人针对自身企业的相关数据信息进行划分提取权限等级，存储设定的权限等级作为比对项，并对客群管理模块3提供客户身份的权限进行识别。

权限管理模块4还包括密匙单元403和防火墙单元402，

其中，密匙单元403用于客户达不到数据提取权限时提供密码登录平台；防火墙单元402用于预设密匙单元403试探密码次数的上限，且当密码试探输入次数超过上限时对用户终端7的ip进行屏蔽。

管理终端8信号连接有智能机器人模块9，智能机器人模块9用于同用户终端7的使用客户进行在线交互，防火墙单元402在屏蔽客户ip的同时将该客户的注册信息等身份特征传送至管理终端8，由管理终端的智能机器人模块处理并与其提取数据信息所有人和公安系统沟通，判断搜索客户是否存在违法、违约记录并存储其信息，记入黑名单，达到限制其再次注册、登录数据提取平台的效果。

用户终端7包括webrtc单元701和用户app702，

其中，webrtc单元701用于提供网页浏览器构架下的语音对话和视频对话平台；

用户app702为安装在手机和电脑上的软件，用于提供客户注册、登录数据提取平台，并提供在线实时交互平台。

综上，使用时，发布数据信息的企业通过权限设定单元401针对自身企业的相关数据信息进行划分提取权限的等级，客户通过用户终端7注册数据提取平台的账号并登录，其通过用户终端7的网页浏览器或app提供的搜索引擎输入想要提取数据信息的关键词，客户同时与管理终端8的智能机器人模块9进行在线交互，客群管理模块3通过客群采集单元301从客户的注册信息、搜索关键词以及在线交互过程中产生的信息中采集客户的有关信息，通过身份识别单元302将客户身份特征与存储单元303中的客户信息进行比对，当识别到该客户本次搜索的信息范围与其之前搜索的范围匹配时，即由大数据云端服务中心1的索引单元102将数据库单元101中的相关数据信息的关键词提供给该客户，供其选择，提取，若未匹配成功，则由权限设定单元401进行客户的权限匹配，若客户的身份特征及其搜索的关键词满足关键词涉及企业数据信息的权限，则将数据信息提供给该客户，若权限匹配不成功，则由密匙单元403提供密码访问登录窗口，客户通过向信息所有人获得密码，完成登录并提取信息，若客户无法获得密码，而采取试探密码的方式登录，超过试探预设次数时，则由防火墙模块402屏蔽该客户的ip，同时将该客户的注册信息等身份特征传送至管理终端8，由管理终端8的智能机器人模块9处理并与信息所有人和公安系统沟通，判断搜索客户是否存在违法、违约记录并存储其信息，将其记入黑名单，限制其再次注册、登录数据提取平台。

在本发明所提供的几个实施方式中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施方式仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离元器件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的元器件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。

另外，在本发明各个实施方式中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本发明各个实施方式所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。