一种政法系统信息资源整合方法
【专利摘要】本发明涉及一种政法系统信息资源整合方法，数据采集入库、数据资源处理、数据服务、数据资源管理，对来自不同平台、不同格式的信息资源整合，实现对信息资源进行序列化、共享化、协调化，进而拓展信息资源应用领域和挖掘信息价值。
【专利说明】一种政法系统信息资源整合方法
【技术领域】
[0001]本发明涉及数据库建设领域，具体涉及一种将多种不同格式的数据进行整合建立统一数据库的技术和方法。
【背景技术】
[0002]20世纪90年代初期以来，伴随着政府信息化建设的深入发展，信息资源作为政府宝贵的财富，已经成为社会运行和发展不可缺少的生产要素、无形资产和社会财富。信息资源的贫富状况已成为衡量一个国家和地区文明的重要指标。尤其对于政法系统部门而言，已经把加强信息资源的管理、开发和利用作为成为维护社会稳定和指导运行的有效手段。但如今全球信息化飞速发展、信息量爆炸式增长，各政法部门以前各自分别建设的信息化平台以及信息资源的分散与割裂已经成为我国政法系统信息化建设的主要瓶颈，作为拥有信息资源量占政府机关所占社会信息资源总量的70%以上的政法系统，“信息孤岛”现象十分普遍，更是导致政法部门间的信息资源共享困难和协同办公难于实现的关键原因，严重影响着政法部门自身管理职能的完善和服务水平的提高，影响着管理者决策的科学性和有效性。为此，加强对信息资源的管理是信息化发展大势所趋和政法部门自身职能完善的迫切需要。
【发明内容】
[0003]本发明的目的在于提供一种政信息资源整合的方法，通过对来自不同平台、不同格式的信息资源整合，实现对信息资源进行序列化、共享化、协调化，进而拓展信息资源应用领域和挖掘信息价值，从而实现“统筹规划，全面管理”，最大程度优化政法系统管理层决策。
[0004]一种政法系统信息资源整合方法，其特征在于包括以下步骤:
[0005](I)数据采集入库
[0006]数据采集入库分为两个阶段，第一个阶段为数据准备阶段，根据数据来源单位系统数据库结构，制定数据抽取方案，同时根据抽取数据的特点制定校核规则，以保证入库的数据均为完整有效；第二个阶段为数据采集入库阶段，根据第一个阶段准备的前置数据库进行直接抽取，以便快速将历史信息入库，完成共享信息库的第一步建设；
[0007](2)数据资源处理
[0008]通过数据质量分析工具对政法共享信息资源库的数据进行相应的校验，发现问题数据，并将问题数据信息记录到问题数据库中；
[0009](3)数据服务
[0010]包括批量数据下载响应服务和全文检索响应服务；对批量数据请求服务，向信息资源整合平台发起批量数据下载申请，明确所需数据种类、范围、数据项、打包频率，在审批通过后，由平台根据申请参数完成数据的查询打包，打包过程允许自定义数据种类、数据过滤条件、数据记录数限制、数据项选择、打包文件格式、执行时间点、执行频率等参数，在打包过程中授权用户等参数将被详细记录，打包数据完成后将由请求响应服务将结果数据反馈给前置服务器，政法各部门的授权系统接收下载已授权数据，数据下载情况将记录详细日志以备审计；对于数据检索请求服务，通过直接访问信息资源整合平台所提供的全文检索功能进行数据检索，用户提交对应的查询服务请求，信息资源整合平台WEB服务器转发请求到平台进行数据查询权限的审批，审批通过后，查询信息将发送给政法共享信息库完成请求发送，待数据库完成查询工作后将信息返回给WEB服务器，WEB服务器将查询结果信息转化为HTML数据返回给用户；
[0011](4)数据资源管理
[0012]主要包括:
[0013]数据注册管理:通过可视化、规范化的数据资源地图管理，帮助数据管理人员了解管理的数据内容，对应数据的含义；同时，利用记录数据环境的相关信息，为其他应用系统的数据转换、加工和应用提供信息支持；
[0014]数据标准管理:建立统一的数据信息资源共享标准规范，对各类数据资源进行规范化的标准检测，标准化检测结果将定期通报；
[0015]数据质量管理:提供对平台上数据整合处理过程以及处理后形成的资源库中的数据进行数据质量检测，形成质量问题数据记录；同时支持用户将其在使用各种应用功能中所发现的信息资源数据质量问题，录入登记为质量问题数据记录；
[0016]数据运行监控:对数据转换过程中的各个环节进行整理与归类，针对各个环节的特定指标进行实时监控，一旦某个环节出现异常，通过报警接口向指定人员提供多种方式报警。
[0017]上述政法系统信息资源整合方法，所述步骤(I)中，对于网络能够直接互联，并具备统一管理政法各部门信息资源库的职能单位，政法系统共享资源数据库将在建设之初与该单位的系统直接对接，在得到充分授权后，对数据进行抽取；根据共享需求将必要信息项采集到前置服务器的缓存数据区中，再通过内外网交换平台将数据传输到信息资源整合平台中，经过采集、清洗、转换、集成以确保数据的有效性，最终将数据存储入政法共享资源数据库；对于初次采集清洗数据过程中遇到的问题数据，系统向前置服务反馈校核信息，并将问题数据导入问题数据库发送前置数据库。
[0018]本发明的有益效果在于:
[0019]信息资源整合有利于满足信息使用者多元化的信息需求。现有的信息管理系统提供的信息的增值性不强，造成信息使用者对信息的理解有困难。信息整合将弥补信息管理体制的这些缺陷，通过广泛的信息收集，深入的整合分析，向信息使用者提供多元化的有效信息。
[0020]信息资源整合能够实现信息增值。通过内外部信息的有机融合与平滑流动和共享，提高信息使用率，并生成可供政法系统内各级决策者制定战略决策的有价信息。
[0021]信息资源整合融能够将政法系统外部各种多元异构信息根据组织内部需求及时、准确地手机到组织内部，实现内外信息的有机融合，从而优化政法系统资源，提高政府服务水平。
【专利附图】
【附图说明】[0022]图1是数据初次采集入库流程图
[0023]图2是政法共享信息资源库的建库流程
[0024]图3是批量数据请求服务流程
[0025]图4是门户数据搜索请求服务流程
【具体实施方式】
[0026]以下结合附图，对本发明详细说明。本发明包括以下步骤:
[0027]1.数据采集入库
[0028]如图1所示，数据初次采集入库分为两个阶段，第一个阶段为数据准备阶段，需要与数据来源单位充分沟通理解该单位系统数据库结构，合理制定数据抽取方案。同时还要根据抽取数据的特点制定校核规则，以保证入库的数据均为完整有效。第二个阶段为数据采集入库阶段，根据第一个阶段准备的前置数据库进行直接抽取，以便快速将历史信息，完成政法共享信息库的第一步建设。
[0029]对于网络能够直接互联，并具备统一管理政法各部门信息资源库的职能单位，政法系统共享资源数据库将在建设之初与该单位的系统直接对接，在得到充分授权后，对数据进行抽取。根据共享需求将必要信息项采集到前置服务器的缓存数据区中，再通过内外网交换平台将数据传输到信息资源整合平台中，经过采集、清洗、转换、集成等过程以确保数据的有效性，最终将数据存储入政法共享资源数据库。对于初次采集清洗数据过程中遇到的问题数据，系统可以向前置服务反馈校核信息，并将问题数据导入问题数据库发送前置数据库。
[0030]2.数据资源处理
[0031]如图2所示，政法共享信息在整个数据采集入库流程中一般要经过抽取、清洗、转换、集成、装载，最后才能够进入到政法共享信息资源库中。当政法共享信息资源库建立完毕后，还将通过数据质量分析工具对政法共享信息资源库的数据进行相应的校验，发现问题数据，并将问题数据信息记录到问题数据库中。
[0032]3.数据服务流程
[0033]数据服务的形式主要分为两种，一种为批量数据下载响应服务；一种为全文检索响应服务。
[0034](I)批量数据请求服务流程
[0035]如图3所示，向信息资源整合平台发起批量数据下载申请，明确所需数据种类、范围、数据项、打包频率等。在审批通过后，由平台根据申请参数完成数据的查询打包，打包过程允许自定义数据种类、数据过滤条件、数据记录数限制、数据项选择、打包文件格式、执行时间点、执行频率等参数，在打包过程中授权用户等参数将被详细记录。打包数据完成后将由请求响应服务将结果数据反馈给前置服务器，政法各部门的授权系统(用户)接收下载已授权数据，数据下载情况将记录详细日志以备审计。
[0036](2)数据检索请求服务流程
[0037]如图4所示，通过直接访问信息资源整合平台所提供的全文检索功能进行数据检索，用户提交对应的查询服务请求，信息资源整合平台WEB服务器转发请求到平台进行数据查询权限的审批。审批通过后，查询信息将发送给政法共享信息库完成请求发送，待数据库完成查询工作后将信息返回给WEB服务器，WEB服务器将查询结果信息转化为HTML数据返回给用户。
[0038]4.数据资源管理
[0039]数据资源管理主要包括:数据注册管理、数据标准管理、数据质量管理和数据运行监控四个方面:
[0040](I)数据注册管理:建立长效的数据资源注册与发布机制，能够使数据管理人员及时了解和掌握所管理的数据资源的总体情况，实现对各类资源库所涉及数据信息进行管理和维护，简化数据层面的工作流程。数据资源注册管理通过可视化、规范化的数据资源地图管理，帮助数据管理人员了解管理的数据内容，对应数据的含义；同时，利用记录数据环境的相关信息，为其他应用系统的数据转换、加工和应用提供信息支持。
[0041](2)数据标准管理:实现数据资源的标准化，建立统一的数据信息资源共享标准规范，如信息代码标准、数据结构/数据交换共享标准、信息资源服务接口规范，为信息资源质量管理、信息资源运行监控功能提供支持。通过建立定期的数据标准化检验工作机制，对各类数据资源进行规范化的标准检测，标准化检测结果将定期通报，确保后续的数据共享工作能够顺利展开。
[0042](3)数据质量管理:建立完善的数据质量分析机制，提供对平台上数据整合处理过程以及处理后形成的资源库中的数据进行数据质量检测，形成质量问题数据记录；同时支持用户将其在使用各种应用功能中所发现的信息资源数据质量问题，录入登记为质量问题数据记录。基于分析结果发布数据质量分析报告，并通过技术手段促进数据质量的提升。
[0043](4)数据运行监控:由于资源库的数据来源于不同业务数据库，在数据汇集、清洗、转换、关联的过程中，涉及到业务系统数据库、数据抽取整合工具、数据质量监控、数据标准化检查等环节的运行情况，数据情况复杂管理难度大。运行监控管理将对数据转换过程中的各个环节进行整理与归类，针对各个环节的特定指标进行实时监控，一旦某个环节出现异常，通过报警接口向指定人员提供多种方式报警。
【权利要求】
1.一种政法系统信息资源整合方法，其特征在于包括以下步骤: (1)数据采集入库 数据采集入库分为两个阶段，第一个阶段为数据准备阶段，根据数据来源单位系统数据库结构，制定数据抽取方案，同时根据抽取数据的特点制定校核规则，以保证入库的数据均为完整有效；第二个阶段为数据采集入库阶段，根据第一个阶段准备的前置数据库进行直接抽取，以便快速将历史信息入库，完成共享信息库的第一步建设； (2)数据资源处理 通过数据质量分析工具对政法共享信息资源库的数据进行相应的校验，发现问题数据，并将问题数据信息记录到问题数据库中； (3)数据服务 包括批量数据下载响应服务和全文检索响应服务；对批量数据请求服务，向信息资源整合平台发起批量数据下载申请，明确所需数据种类、范围、数据项、打包频率，在审批通过后，由平台根据申请参数完成数据的查询打包，打包过程允许自定义数据种类、数据过滤条件、数据记录数限制、数据项选择、打包文件格式、执行时间点、执行频率等参数，在打包过程中授权用户等参数将被详细记录，打包数据完成后将由请求响应服务将结果数据反馈给前置服务器，政法各部门的授权系统接收下载已授权数据，数据下载情况将记录详细日志以备审计；对于数据检索请求服务，通过直接访问信息资源整合平台所提供的全文检索功能进行数据检索，用户提交对应的查询服务请求，信息资源整合平台WEB服务器转发请求到平台进行数据查询权限的审批，审批通过后，查询信息将发送给政法共享信息库完成请求发送，待数据库完成查询工作后将信息返回给WEB服务器，WEB服务器将查询结果信息转化为HTML数据返回给用户； (4)数据资源管理 主要包括: 数据注册管理:通过可视化、规范化的数据资源地图管理，帮助数据管理人员了解管理的数据内容，对应数据的含义；同时，利用记录数据环境的相关信息，为其他应用系统的数据转换、加工和应用提供信息支持； 数据标准管理:建立统一的数据信息资源共享标准规范，对各类数据资源进行规范化的标准检测，标准化检测结果将定期通报； 数据质量管理:提供对平台上数据整合处理过程以及处理后形成的资源库中的数据进行数据质量检测，形成质量问题数据记录；同时支持用户将其在使用各种应用功能中所发现的信息资源数据质量问题，录入登记为质量问题数据记录； 数据运行监控:对数据转换过程中的 各个环节进行整理与归类，针对各个环节的特定指标进行实时监控，一旦某个环节出现异常，通过报警接口向指定人员提供多种方式报警。
2.根据权利要求1所述的政法系统信息资源整合方法，其特征在于:所述步骤(1)中，对于网络能够直接互联，并具备统一管理政法各部门信息资源库的职能单位，政法系统共享资源数据库将在建设之初与该单位的系统直接对接，在得到充分授权后，对数据进行抽取；根据共享需求将必要信息项采集到前置服务器的缓存数据区中，再通过内外网交换平台将数据传输到信息资源整合平台中，经过采集、清洗、转换、集成以确保数据的有效性，最终将数据存储入政法共享资源数据库；对于初次采集清洗数据过程中遇到的问题数据，系统向前置服务反馈校核信息，并将 问题数据导入问题数据库发送前置数据库。
【文档编号】G06F17/30GK103793399SQ201210424042
【公开日】2014年5月14日 申请日期:2012年10月31日 优先权日:2012年10月31日
【发明者】罗克刚, 陈加 申请人:北京航天长峰科技工业集团有限公司