本申请涉及大数据及相关技术领域,尤其涉及一种政策资助的困难群体的民生数据的整合方法、装置和系统。
背景技术:
目前,政策资助的困难群体各种民生数据问题是由多个政府部门和社会组织分别解决,在解决的过程中通常需要各部门和组织分别进行数据的采集、整合和处理,这样的过程导致执行效率低下。
技术实现要素:
为至少在一定程度上克服相关技术中存在的多个政府部门和社会组织分别进行数据的采集和整合处理,解决其效率低下问题,本申请提供一种政策资助的困难群体的民生数据的整合方法、装置和系统。
根据本申请实施例的第一方面,提供一种政策资助的困难群体的民生数据的整合方法,包括:
获取困难群体的民生数据;
根据民生大数据与生态互联网平台结合架构,整合所述困难群体的民生数据,将所述困难群体的民生数据分类;
获取各终端发送的数据请求;
响应所述数据请求。
可选的,民生大数据与生态互联网平台结合架构包括:
民生就业---求职招聘、民生教育---培训考试、民生救助---精准扶贫智能化、共享·采集---全国民生共享系统与大数据采集系统、民生管控---各级政府操作系统、民生企业---政策智能落实系统、志愿者---社会公益服务、残疾人---康复与专职委员、和民生婚恋---绣球缘、数据融合与挖掘功能等十大功能模块构成生态平台与大数据结合机制。通过该架构,将政策资助的所有困难群体整合到一个平台上运作;将政策资助的所有困难群体对就业、培训、救助等民生需求整合到一个平台解决;将多个政府部门的相关职责与相关政策落实整合到一个平台智能化执行。
可选的,所述获取民生数据包括:
获取求职招聘系统、培训考试系统和精准扶贫智能化等系统中的数据。
可选的,所述整合所述民生数据包括:
将所述民生数据导入民生数据库;
利用twitterstorm等多元数据融合处理技术,实时数据处理框架技术处理所述民生数据;
剔除完整性不足的数据。
可选的,所述数据库存储的方式为分布式存储方式、集中式存储方式或分布式与集中式相结合的存储方式。
可选的,所述剔除完整性不足的数据之前,还包括:
利用k-means硬聚类算法,充分挖掘集成离散的不完整的民生数据,得到可利用的数据。
可选的,所述整合所述民生数据还包括:
连接政府和社会数据库,检验所述民生数据的真实性;
剔除不具有真实性的数据。
可选的,所述整合所述民生数据还包括:
对所述民生数据按照预设的类别进行归类;
其中,预设的类别包括:求职招聘民生数据、培训考试民生数据、求助和救助民生数据等。
可选的,还包括:
自动匹配所述求职招聘民生数据、培训考试民生数据、求助和救助等民生数据;
向所述求职招聘民生数据的数据来源发送匹配的培训考试民生数据、求助和救助等民生数据;
向所述培训考试民生数据的数据来源发送匹配的求职招聘民生数据、求助和救助等民生数据;
向所述求助和救助民生数据的数据来源发送匹配的求职招聘民生数据、培训考试的民生数据;
根据本申请实施例的第二方面,提供一种政策资助的困难群体的民生数据的整合装置,包括:
第一获取模块,用于获取政策资助的困难群体的民生数据;
整合模块,用于根据民生大数据与生态互联网平台结合架构,整合民生数据,将所述民生数据分类;
第二获取模块,用于获取各终端发送的数据请求;
响应模块,用于响应所述数据请求。
可选的,民生大数据与生态互联网平台结合架构包括:
民生就业---求职招聘、民生教育---培训考试、民生救助---精准扶贫智能化、共享·采集---全国民生共享系统与大数据采集系统、民生管控---各级政府操作系统、民生企业---政策智能落实系统、志愿者---社会公益服务、残疾人---康复与专职委员、民生婚恋---绣球缘、数据融合与挖掘功能十大功能模块;
可选的,所述获取民生数据包括:
获取求职招聘系统、培训考试系统和精准扶贫智能化系统中的数据。
可选的,所述整合模块具体用于:
将所述民生数据导入民生数据库;
利用twitterstorm等多元数据融合处理技术,实时数据处理框架技术处理所述民生数据;
剔除完整性不足的数据。
可选的,所述数据库存储的方式为分布式存储方式、集中式存储方式或分布式与集中式相结合的存储方式。
可选的,所述整合模块具体还用于:
利用k-means硬聚类算法,充分挖掘集成离散的不完整的民生数据,得到可利用的数据。
可选的,所述整合模块具体还用于:
连接政府和社会数据库,检验所述民生数据的真实性;
剔除不具有真实性的数据。
可选的,所述整合模块具体还用于:
对所述民生数据按照预设的类别进行归类;
其中,预设的类别包括:求职招聘民生数据、培训考试民生数据、求助和救助民生数据等。
可选的,民生数据整合装置还包括:
自动匹配模块,用于自动匹配所述求职招聘民生数据、培训考试民生数据、求助和救助民生数据等;
发送模块,用于向所述求职招聘民生数据、培训考试民生数据、求助和救助等民生数据的数据来源交互发送匹配。
根据本申请实施例的第三方面,提供一种政策资助的困难群体的民生数据的整合系统,包括:服务器、与所述服务器通信连接的终端;
所述服务器,执行如本申请实施例的第一方面,提供的政策资助的困难群体的民生数据整合方法。
本申请提供的技术方案可以包括以下有益效果:
由于本申请提供的方法中可以获取和整合政策资助的困难群体的民生数据,同时可以获取各终端发送的数据请求,并响应请求。如此,可以根据民生大数据与生态互联网平台结合架构,整合所述政策资助的困难群体的民生数据,将所述民生数据分类,同时根据多个政府部门和社会组织通过终端发送的数据请求,根据接口标准将对应整合好“数据请求”请求的数据回传给对应的终端,提高了效率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本申请。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1是本申请一个实施例提供的政策资助的困难群体的民生数据的整合方法的流程示意图;
图2是本申请另一个实施例提供的政策资助的困难群体的民生数据的整合装置的结构示意图;
图3是本申请另一个实施例提供的政策资助的困难群体的民生数据的整合系统的结构示意图;
图4是本申请另一个实施例提供的民生大数据与生态互联网平台结合架构的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
图1是本申请一个实施例提供的政策资助的困难群体的民生数据的整合方法的流程示意图。如图1所示,该困难群体的民生数据整合方法包括:
步骤110,获取政策资助的困难群体的民生数据;
其中,获取民生数据的方式可以为通过获取求职招聘系统、培训考试系统和精准扶贫智能化系统等系统中的数据,也可以为建立专门的数据采集网站或通道,以采集民生数据。
步骤120,根据民生大数据与生态互联网平台结合架构,整合所述困难群体的民生数据,将所述民生数据分类;
其中,如图4所示,民生大数据与生态互联网平台结合架构1包括:民生就业---求职招聘功能模块11、民生教育---培训考试功能模块12、民生救助---精准扶贫智能化功能模块13、共享·采集---全国民生共享系统与大数据采集系统功能模块14、民生管控---各级政府操作系统功能模块15、民生企业---政策智能落实系统功能模块16、志愿者---社会公益服务功能模块17、残疾人---康复与专职委员功能模块18、民生婚恋---绣球缘功能模块19、数据融合与挖掘功能模块20。
民生大数据工程与生态互联网平台结合架构1还可以包括其他用于整合民生数据的功能模块。
通过该架构,实现将政策资助的所有困难群体整合到一个平台上运作;将政策资助的所有困难群体对就业、培训、救助等民生需求整合到一个平台解决;将多个政府部门的相关职责与相关政策落实整合到一个平台智能化执行。
其中,民生数据主要用于供社会研究和/或供政府决策。具体的,一些法律允许公开且不会对国家的安全构成威胁的民生数据可以进行公开以供社会研究。一些有助于政府决策或可以提高某些政府部门的工作效率的民生数据用于供政府提取使用。进一步的,例如:民生就业---求职招聘功能模块中,关于就业的民生数据的统计可以供政府进行决策,一些求职信息数据和招聘信息数据可以进行公开,使得招聘人员和招聘部门可以更好的对接,结合其它功能模块,实现将政策资助的所有困难群体对就业、培训、救助等民生需求整合到一个平台解决。
其中,具体的步骤120包括:
将民生数据导入民生数据库;利用twitterstorm等多元数据融合处理技术,实时数据处理框架技术处理所述民生数据;剔除完整性不足的数据。如此,不仅可以完成数据的整合,还可以剔除不完成的数据,保证数据的完整性。twitterstorm是一种多元数据融合处理技术,可以将各类数据进行存储并进行实时的更新和维护。
进一步的,步骤120还包括:连接政府和社会数据库,检验民生数据的真实性并执行数据;剔除不具有真实性的数据。如此,可以确保数据的真实性。
进一步的,步骤120还包括:利用k-means硬聚类算法,充分挖掘集成离散的不完整的民生数据,得到可利用的数据数据。如此,可以进一步的扩充数据。具体的,分为以下步骤:(a)在某人所填写的所有n个数据资料任意选择k个资料作为初始聚类中心;(b)根据每个聚类资料的均值(中心对象),计算每个会员资料与中心对象的距离;并根据最小距离重新对相应对象进行划分;该最小距离根据资料与政府大数据身份核实情况而定。(c)重新计算每个(有变化)聚类的均值(中心对象);(d)所计算出来的均值符合所本系统身份真实性确定最低条件时,则算法终止;如果条件不满足则回到步骤(b)。如此,可以将离散的,不完整的,无法确定真实性的数据进行整合,得到可以确定真实性的且相对完整的数据。
数据库存储的方式为分布式存储方式、集中式存储方式或分布式与集中式相结合的存储方式。进一步的,数据库采用分布式存储。分布式存储具有以下优点:物理介质分布到不同的地理位置;视频流就近上传,对骨干网带宽没有什么要求;可采用多套低端的小容量的存储设备分布部署,设备价格和维护成本较低;小容量设备分布部署,对机房环境要求低。另外,分布式存储,利用区块链技术应用存储可以保障信息不可修改的真实性等等。
具体的,各级政府部门或其他相关人员可以通过终端发送数据请求;其他相关人员可以是一些相关企业的人员,也可以是志愿者,征婚者,贫困者,求职者,待培训者等。
对民生数据按照预设的类别进行归类;其中,预设的类别可以包括:求职招聘民生数据、培训考试民生数据、求助和救助民生数据等。当然,预设的类别也可以包括:求职招聘数据、培训考试数据、精准扶贫数据、社会公益数据、残疾人数据、婚恋数据等。
步骤130,获取各终端发送的数据请求;
步骤140,响应数据请求。
具体的,步骤140,中响应数据请求的具体方式为,根据接口标准回传“数据请求”请求的数据。
由于本申请提供的方法中可以获取和整合政策资助的困难群体的民生数据;同时可以获取各终端发送的数据请求,并响应请求。如此,可以将民生数据进行整合,同时根据多个政府部门和社会组织通过终端发送的数据请求,根据接口标准将对应的整合好的数据发送给对应的终端,提高了效率。
进一步的,本申请提供的政策资助的困难群体的民生数据的整合方法还包括:
自动交互匹配求职招聘民生数据、培训考试民生数据、求助和救助民生数据等;
如此,可以进一步的整合数据,并通过向求助和救助民生数据的数据来源发送匹配的求职招聘民生数据、培训考试民生数据,或,向求职招聘民生数据的来源发送匹配的培训考试民生数据、求助和救助民生数据,或,向培训考试民生数据的来源发送匹配的求职招聘民生数据、求助和救助民生数据,来帮助政策资助的困难群体尽快获得相关数据,以便完成就业、培训和资助。
本申请还提供了一种政策资助的困难群体的民生数据的整合装置,参照图2,包括:
第一获取模块210,用于获取政策资助的困难群体的民生数据;
整合模块220,用于根据民生大数据与生态互联网平台结合架构,整合所述民生数据,将所述民生数据分类;
第二获取模块230,用于获取各终端发送的数据请求;
响应模块240,用于响应数据请求,回传所述数据请求请求的数据。
由于本申请提供的装置中可以获取和整合政策资助的困难群体的民生数据,同时可以获取各终端发送的数据请求,并响应请求。如此设置,可以将困难群体的民生数据进行整合,同时根据多个政府部门和社会组织通过终端发送的数据请求,将对应的整合好的数据请求请求的数据回传给对应的终端,提高了效率。
可选的,获取民生数据包括:
获取求职招聘系统、培训考试系统和精准扶贫智能化系统等系统中的数据。
可选的,整合模块具体用于:
将民生数据导入民生数据库;
利用twitterstorm等多元数据融合处理技术,实时数据处理框架技术处理所述民生数据;
剔除完整性不足的数据。
可选的,数据库采用分布式存储、集中式存储方式或分布式与集中式相结合的存储方式。。
可选的,整合模块具体还用于:
利用k-means硬聚类算法,充分挖掘集成离散的不完整的民生数据,得到可利用的数据。
可选的,整合模块具体还用于:
连接政府和社会数据库,检验民生数据的真实性并执行数据;
剔除不具有真实性的数据,政府和社会对真实性数据进行执行(如减免税费、发放补贴、提供其它资助)。
可选的,整合模块具体还用于:
对民生数据按照预设的类别进行归类;
其中,预设的类别包括:求职招聘民生数据、培训考试民生数据、求助和救助民生数据等。
可选的,民生数据整合装置还包括:
自动匹配模块,用于自动匹配求职招聘民生数据、培训考试民生数据、求助和救助民生数据;
发送模块,用于向求助和救助民生数据的数据来源发送匹配的求职招聘民生数据、培训考试等民生数据;向求职招聘民生数据的来源发送匹配的培训考试民生数据、求助和救助等民生数据;向培训考试民生数据的来源发送匹配的求职招聘民生数据、求助和救助等民生数据。向政府和社会组织发送真实性判断烦的执行信息(如减免税费、发放补贴、提供其它资助)。
本申请实施例还提供一种政策资助的困难群体民生数据整合系统。请查阅图3,图3为本申请提供的民生数据整合系统的结构板示意图,如图3所示,该系统包括:服务器31、终端32;
服务器31,执行上述的民生数据整合方法。
由于本申请提供的装置中可以获取和整合民生数据,同时可以获取各终端发送的数据请求,并响应请求。如此设置,可以将民生数据进行整合,同时根据多个政府部门和社会组织通过终端发送的数据请求,根据接口标准将对应的整合好的数据请求请求的数据回传给对应的终端,提高了效率。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
可以理解的是,上述各实施例中相同或相似部分可以相互参考,在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。
需要说明的是,在本申请的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本申请的描述中,除非另有说明,“多个”的含义是指至少两个。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(pga),现场可编程门阵列(fpga)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。