一种构建政务大数据平台的方法与流程

技术领域

本发明涉及数据处理技术领域，具体的说是一种通过将政务数据、空间数据、业务数据、属性数据等多源信息进行有效的融合，数据处理和应用方法进行有效的结合和应用，达到可以将多源数据进行应用与展现于一体的智能化信息传递的一种构建政务大数据平台的方法。

背景技术：

智慧城市有狭义和广义两种理解。狭义上的智慧城市指的是以物联网为基础，通过物联化、互联化、智能化方式，让城市中各个功能彼此协调运作，以智慧技术高度集成、智慧产业高端发展、智慧服务高效便民为主要特征的城市发展新模式，其本质是更加透彻的感知、更加广泛的连接、更加集中和更有深度的计算，为城市肌理植入智慧基因。广义上的智慧城市是指以“发展更科学，管理更高效，社会更和谐，生活更美好”为目标，以自上而下、有组织的信息网络体系为基础，整个城市更有较为完善的感知、认知、学习、成长、创新、决策、调控能力和行为意识的一种全新城市形态。

根据目前比较权威的中国智慧工程研究会对“智慧城市”概念的描述是：“智慧城市是目前全球围绕城乡一体化发展、城市可持续化发展、民生核心需求这些发展要素，将先进信息技术与先进的城市经营服务理念进行有效融合，通过对城市的地理、资源、环境、经济、社会等系统进行数字网络化的管理，对城市基础设施、基础环境、生产生活相关产业和设施的多方位数字化、信息化的实时处理与应用，为城市治理与运营提供更简洁、高效、灵活的决策支持与行动工具，为城市公共管理与服务提供更便捷、高效、灵活的创新运营与服务模式”。

而实现智慧城市的关键在于数字城市的构建。数字城市是城市信息化的发展方向，而将多元化的数据进行合理化管理与应用则是城市规划与城市现代化水平的重要标志，已经成为数字城市的基础建设内容和发展趋势。在设定的数据资源以二维、三维地图为基础，在此基础上添加相关的政务数据、属性数据、业务数据和周边相关数据，在实现了规划、项目审批、人口等综合信息时空一体化管理，成果广泛应用于政府部门、设计单位和建设企业。

但是现有的数据资源大都分属在不同的政府部门且数据量非常庞大需进行深度挖掘。在将挖掘出的海量数据进行关联性的分析做出科学的决策。而政府部门拥有海量的、权威的信息资源优势，如果借助大数据发展，可以进一步推动电子政务建设，为社会提供更好的服务和公共产品。大数据从数据源经过分析挖掘到最终获得价值一般经过几个主要环节，包括数据预处理、数据存储与管理、计算处理、数据挖掘与分析、数据应用等几部分。

目前，政务活动产生的数据主要存储在本部门内的单一数据库中，利用大数据技术对政务数据进行深度挖掘分析，首先应该将这些不同数据库的数据导入到一个集中的大型分布式数据库，或者分布式存储集群。从不同数据库抽取出的数据存在各种缺陷不利于后期的挖掘分析，比如数据源格式不同、数据叠加了噪声、数据有冗余和重复、数据有错误等，低质量的数据处理后得不到高质量的结果。所以我们应该在导入的基础上做一些清洗和预处理工作。在数据导入和预处理的过程中最大的特点和挑战主要是导入的数据量大，每秒钟的导入经常会达到百兆甚至千兆级别。因此，基于政务数据种类多样、数据量大、处理速度要求高的特点，需要一种方法能够协调各种预处理操作以保证快速高效处理大批量数据可以应用到统一的政务大数据平台上。满足规划的合理性与统筹性的需求，进一步辅助相关决策者为政务项目的规划提供有效的分析参考依据。通过信息化手段的规范管理，为信息服务系统建设做好铺垫，在持续推进信息化基础建设中提升保障服务能力，为全面推进信息化建设提供平台支撑和信息资源的实时性、完整性做好铺垫。改变人们的生活，推动着工业生产、城市建设以及国防工业的发展，达到真正的电子信息与地理信息技术相互融合，从而实现智慧城市概念的推广与应用。

技术实现要素：

为了克服现有技术方案的弊端，实现慧城市应用领域概念的推广与应用，可以有效的通过将空间数据、业务数据、属性数据、工作流数据、要件数据等多源政务数据进行有效的融合，数据处理和应用方法进行有效的结合和应用，达到可以将数据处理、分析后将多源数据进行应用与展现于一体的智能化信息的传递，从而实现了将业务数据与二、三维图形数据进行有效的融合，实现多维度的立体化的数据信息呈现，辅助决策者进行议案的决策。不仅将所划分的各类信息以图文结合的形式进行展现。通过一种处理方法将政务数据进行数据预处理、数据存储与管理、计算处理、数据挖掘与分析、数据应用等步骤，能够协调各种预处理操作以保证快速高效处理大批量数据可以应用到统一的政务大数据平台上。满足规划的合理性与统筹性的需求，进一步辅助相关决策者为政务项目的规划提供有效的分析参考依据。通过信息化手段的规范管理，为信息服务系统建设做好铺垫，在持续推进信息化基础建设中提升保障服务能力，为全面推进信息化建设提供平台支撑和信息资源的实时性、完整性做好铺垫。改变人们的生活，推动着工业生产、城市建设以及国防工业的发展，达到真正的电子信息与地理信息技术相互融合，从而实现智慧城市概念的推广与应用。

一种构建政务大数据平台的方法，其中，该方法包括如下步骤：

一，信息资源目录梳理分析：对业务产生和使用的信息进行梳理，对信息共享交换与业务事项进行关联性分析，形成信息资源目录、理清业务产生的信息、信息与业务事项的关联、信息的需求和共享；

二，政务大数据的汇聚整合：根据信息资源目录将不同地域、不同部门、不同类型的数据资源进行汇聚、整合，形成统一标准、全局覆盖的政务大数据集；

三，政务大数据的共享交换：数据资源按照各业务规则有序的进行政务大数据间的交换、共享；

四，政务大数据的应用服务：构建应用模型，挖掘有效信息，并将有效信息按需进行推送。

一种构建政务大数据平台的方法，其中，所述步骤一，信息资源目录梳理分析的具体步骤为：

1.1，信息资源前期调查：根据业务需求生成业务调查表、信息资源调查表，对业务调查表、信息资源调查表进行部分人员的试填，根据表格的填写情况进行表单的完善，将完善后的表单进行填写完成业务数据与信息资源数据的梳理，并将梳理后的业务数据与信息资源数据进行整合并存储；对整合后的业务数据与信息资源数据进行评审并补充完善，形成调研信息资源前期调查结果；

1.2，信息资源目录分析生产：将调研信息资源前期调查结果进行纵向的逐级汇总、调研信息资源前期调查结果横向的关联融合对调研结果进行分析，根据业务类型、业务流程生成政务信息资源目录；

1.3，信息资源目录登记、验收：将信息资源目录对各个管理部门进行目录登记和信息资源赋码，对信息资源目录进行人工检查后去除错误信息，将检查合格的信息资源目录再提交至上一级处理系统进行验收。

一种构建政务大数据平台的方法，其中，所述步骤二政务大数据的汇聚整合的具体步骤为：

2.1，数据库的构建：依据不同业务类型、应用领域、构建出基础数据库、专题数据库、审批数据库；

2.2,数据装载：将原有业务系统中的数据向政务大数据集中的公共资源池中进行流转；

2.3，数据标准化处理：依据资源目录清洗业务数据中的杂质，根据资源目录纠正业务数据中的错误，确保数据的一致性、权威性；

2.4，数据资源整合：依据业务的逻辑关系进行关联整合，依据空间位置对业务数据进行关联整合。

一种构建政务大数据平台的方法，其中，所述步骤数据装载的具体步骤为：

建立数据传输模型：构建原有业务系统至政务大数据集的数据传输模型；

链接数据传输通道：在虚拟专用网络的环境下，登录到信息资源中心数据库中建立数据安全传输通道进行数据的安全传输；

数据的装载：将虚拟专有网络中传来的数据进行解密后，装载到公共资源池中。

一种构建政务大数据平台的方法，其中，步骤三政务大数据的共享交换的具体步骤为：

3.1，数据资源发布：基于信息资源目录确定数据资源共享模型，通过Web Service标准发布共享模型形成数据资源对外服务接口；

3.2，数据资源的权限管控：申请、审批数据资源获得数据交换权限，对申请单位的身份进行认证、授权；

3.3，数据交换：依据数据资源的产生时间创建数据交换的时序，根据该时序进行数据交换、共享。

一种构建政务大数据平台的方法，其中，步骤四政务大数据的应用服务的具体步骤为：

4.1，应用模型的构建：根据兴趣领域构建应用模型基础框架，将数据资源进行筛选过滤并填充到对应的应用模型中；

4.2，信息资源的挖掘：将应用模型放置在海量信息资源中进行快速匹配，提取出有价值的信息；

4.3，信息资源服务的推送：根据用户的订阅，自动将挖掘提取出的信息进行推送。

一种构建政务大数据平台的方法，其中，所述基础数据库包括法人数据、人口数据、经济数据、地理空间数据。

一种构建政务大数据平台的方法，其中，所述专题数据库包括卫生数据、交通数据、规划数据、国土政务数据。

一种构建政务大数据平台的方法，其中，所述审批数据库包括日常业务办理数据、工作流数据、流程数据。

一种构建政务大数据平台的方法，其中，所述数据为：空间数据、业务数据、属性数据、政务数据、工作流数据、要件数据。

一种构建政务大数据平台的方法，其中，所述空间数据涉及到地面区域、地下区域、公共区域、商业区域、企事业单位内的区域中进行数据处理、融合、协同办公、呈现中应用。

一种构建政务大数据平台的方法，其中，所述其业务数据特征按业务职能、行业类别、区域特性特征进行分类。

由此可见：

本发明实施例中的方法可以有效的通过将空间数据、业务数据、属性数据、工作流数据、要件数据等多源政务数据进行有效的融合，数据处理和应用方法进行有效的结合和应用，达到可以将数据处理、分析后将多源数据进行应用与展现于一体的智能化信息的传递，从而实现了将业务数据与二、三维图形数据进行有效的融合，实现多维度的立体化的数据信息呈现，辅助决策者进行议案的决策。不仅将所划分的各类信息以图文结合的形式进行展现。通过一种处理方法将政务数据进行数据预处理、数据存储与管理、计算处理、数据挖掘与分析、数据应用等步骤，能够协调各种预处理操作以保证快速高效处理大批量数据可以应用到统一的政务大数据平台上。满足规划的合理性与统筹性的需求，进一步辅助相关决策者为政务项目的规划提供有效的分析参考依据。通过信息化手段的规范管理，为信息服务系统建设做好铺垫，在持续推进信息化基础建设中提升保障服务能力，为全面推进信息化建设提供平台支撑和信息资源的实时性、完整性做好铺垫。改变人们的生活，推动着工业生产、城市建设以及国防工业的发展，达到真正的电子信息与地理信息技术相互融合，从而实现智慧城市概念的推广与应用。

附图说明

图1为本发明的实施例中提供的构建政务大数据平台的方法的流程示意图；

图2为本发明的实施例中提供的信息资源目录梳理分析步骤的流程示意图；

图3为本发明实施例中政务大数据的汇聚整合步骤的流程示意图；

图4为本发明实施例中数据装载步骤的流程示意图；

图5为本发明实施例中政务大数据的共享交换步骤的流程示意图；

图6为本发明实施例中政务大数据的应用服务步骤的流程示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合附图以及具体实施例来详细说明本发明，在此本发明的示意性实施例以及说明用于解释本发明，但并不作为对本发明的限定。

实施例1：

图1为本实施例提供的构建政务大数据平台的方法的流程示意图，如图1所示，一种构建政务大数据平台的方法，其中，该方法包括如下步骤：

一，信息资源目录梳理分析：对业务产生和使用的信息进行梳理，对信息共享交换与业务事项进行关联性分析，形成信息资源目录、理清业务产生的信息、信息与业务事项的关联、信息的需求和共享；

二，政务大数据的汇聚整合：根据信息资源目录将不同地域、不同部门、不同类型的数据资源进行汇聚、整合，形成统一标准、全局覆盖的政务大数据集；

三，政务大数据的共享交换：数据资源按照各业务规则有序的进行政务大数据间的交换、共享；

四，政务大数据的应用服务：构建应用模型，挖掘有效信息，并将有效信息按需进行推送。

如图2所示，一种构建政务大数据平台的方法，其中，所述步骤一，信息资源目录梳理分析的具体步骤为：

1.1，信息资源前期调查：根据业务需求生成业务调查表、信息资源调查表，对业务调查表、信息资源调查表进行部分人员的试填，根据表格的填写情况进行表单的完善，将完善后的表单进行填写完成业务数据与信息资源数据的梳理，并将梳理后的业务数据与信息资源数据进行整合并存储；对整合后的业务数据与信息资源数据进行评审并补充完善，形成调研信息资源前期调查结果；

1.2，信息资源目录分析生产：将调研信息资源前期调查结果进行纵向的逐级汇总、调研信息资源前期调查结果横向的关联融合对调研结果进行分析，根据业务类型、业务流程生成政务信息资源目录；

1.3，信息资源目录登记、验收：将信息资源目录对各个管理部门进行目录登记和信息资源赋码，对信息资源目录进行人工检查后去除错误信息，将检查合格的信息资源目录再提交至上一级处理系统进行验收。

如图3所示，一种构建政务大数据平台的方法，其中，所述步骤二政务大数据的汇聚整合的具体步骤为：

2.1，数据库的构建：依据不同业务类型、应用领域、构建出基础数据库、专题数据库、审批数据库；

2.2,数据装载：将原有业务系统中的数据向政务大数据集中的公共资源池中进行流转；

2.3，数据标准化处理：依据资源目录清洗业务数据中的杂质，根据资源目录纠正业务数据中的错误，确保数据的一致性、权威性；

2.4，数据资源整合：依据业务的逻辑关系进行关联整合，依据空间位置对业务数据进行关联整合。

如图4所示，一种构建政务大数据平台的方法，其中，所述步骤数据装载的具体步骤为：

建立数据传输模型：构建原有业务系统至政务大数据集的数据传输模型；

链接数据传输通道：在虚拟专用网络的环境下，登录到信息资源中心数据库中建立数据安全传输通道进行数据的安全传输；

数据的装载：将虚拟专有网络中传来的数据进行解密后，装载到公共资源池中。

如图5所示，一种构建政务大数据平台的方法，其中，步骤三政务大数据的共享交换的具体步骤为：

3.1，数据资源发布：基于信息资源目录确定数据资源共享模型，通过Web Service标准发布共享模型形成数据资源对外服务接口；

3.2，数据资源的权限管控：申请、审批数据资源获得数据交换权限，对申请单位的身份进行认证、授权；

3.3，数据交换：依据数据资源的产生时间创建数据交换的时序，根据该时序进行数据交换、共享。

如图6所示，一种构建政务大数据平台的方法，其中，步骤四政务大数据的应用服务的具体步骤为：

4.1，应用模型的构建：根据兴趣领域构建应用模型基础框架，将数据资源进行筛选过滤并填充到对应的应用模型中；

4.2，信息资源的挖掘：将应用模型放置在海量信息资源中进行快速匹配，提取出有价值的信息；

4.3，信息资源服务的推送：根据用户的订阅，自动将挖掘提取出的信息进行推送。

具体实施例中所述基础数据库包括法人数据、人口数据、经济数据、地理空间数据。

具体实施例中所述专题数据库包括卫生数据、交通数据、规划数据、国土政务数据。

具体实施例中所述审批数据库包括日常业务办理数据、工作流数据、流程数据。

具体实施例中所述数据为：空间数据、业务数据、属性数据、政务数据、工作流数据、要件数据。

具体实施例中所述空间数据涉及到地面区域、地下区域、公共区域、商业区域、企事业单位内的区域中进行数据处理、融合、协同办公、呈现中应用。

具体实施例中所述其业务数据特征按业务职能、行业类别、区域特性特征进行分类。

下面以一个具体实施例来说明：

图1根据实施例示出了一种构建政务大数据平台的方法步骤，包含了信息资源目录梳理分析、政务大数据的汇聚整合、政务大数据的共享交换、政务大数据的应用服务四步。具体工作步骤：

一，信息资源目录梳理分析：通过对业务的输入、办理、输出等内容进行梳理，对业务之间如何协助进行分析，得到每类业务产生的信息、每类业务使用的信息、不同业务信息之间的关联关系、不同业务信息对其他业务信息的共享需求，最终形成能够表达全局业务的信息资源目录。

1.1信息资源前期调查：根据业务梳理内容生成业务调查表、信息资源调查表，对业务调查表、信息资源调查表进行部分人员的试填，根据表格的试填情况进行调查表的完善，将完善后的调查表进行填写完成业务与信息资源数据的梳理，并将梳理后的业务与信息资源数据进行整合并存储；对整合后的业务与信息资源数据进行评审并补充完善，形成调研信息资源前期调查结果；

1.2，信息资源目录分析生产：将调研信息资源前期调查结果进行纵向的逐级汇总、调研信息资源前期调查结果横向的关联融合对调研结果进行分析，根据业务类型、业务流程生成政务信息资源目录；

1.3，信息资源目录登记、验收：将各个管理部门的信息资源进行目录登记和信息资源赋码，对信息资源目录进行人工检查后去除错误信息，将检查合格的信息资源目录再提交至上一级处理系统进行验收。

二，政务大数据的汇聚整合：根据信息资源目录将不同部门、不同业务、不同类型的数据资源进行汇聚、整合，形成统一标准、全局覆盖的政务大数据集；

2.1，数据库的构建：依据不同应用领域、更新频率、业务类型，构建出基础数据库、专题数据库、审批数据库；

2.2,数据装载：将位于不同部门、不同信息系统的业务信息数据向政务大数据的公共资源清洗池进行传输。因为业务信息数据位于不同部门的不同信息系统内，所有数据存储的方式、结构各不相同。为解决这一难题，需要将业务信息数据先转换成加密的标准数据块，通过私有的VPN网络传输到政务大数据的公共资源清洗池。公共资源清洗池根据特定秘钥解密业务信息数据，并暂时存储下来。

2.3，数据标准化处理：依据信息资源目录中的业务信息定义和业务信息关联规则，清洗政务大数据公共资源清洗池中业务信息数据的脏数据，并规范数据格式，纠正数据错误，确保业务信息数据的一致性、权威性；数据标准化处理不仅涉及数据定义、类型、表达等属性的标准化，还涉及到业务信息数据前后内容一致性、逻辑合理性等方面的标准化。

2.4，数据资源整合：依据信息资源目录中业务的逻辑关系进行关联整合，形成一条业务线全生命周期管理；依据全局地理信息框架下业务信息的空间位置进行关联整合，形成一片空间区域上各类业务信息的全过程管理。

三，政务大数据的共享交换：政务大数据中的信息资源按照信息资源目录中的规则有序的进行数据的交换、共享；

3.1，信息资源发布：基于信息资源目录确定数据共享模型，通过Web Service标准发布共享模型形成信息资源对外服务接口。数据共享模型是根据元数据库中关于信息资源的定义来自动生成计算机可识别的JSON数据对象。这些JSON数据对象通过一个统一的数据发布器自动生成一个有序信息资源排列发布成Web Service标准服务接口。

3.2，信息资源的权限管控：申请、审批信息资源获得数据交换权限，对申请单位的身份进行认证、授权；信息资源的权限管控应参考申请单位自身业务需求和用途进行严格管控，避免信息资源无序流转，降低信息资源流失风险。

3.3，信息资源共享交换：依据业务信息产生的时间和业务之间关联关系，创建政务大数据中各类信息资源的交换时序。根据交换时序进行数据交换、共享，已保证业务信息流转方向的正确性。

四，政务大数据的应用服务：构建应用模型，挖掘有效信息，并将有效信息面向不同用户按需进行推送。

4.1，应用模型的构建：根据兴趣领域构建应用模型基础框架，将政务大数据中的信息资源进行筛选过滤并填充到对应的应用模型中。应用模型的构建，是通过数学模型算法和业务知识来实现的，会根据业务的关注点不同而不断变化。一个成熟的应用模型是通过不断的业务积累和算法改进来实现的。

4.2，信息资源的挖掘：将应用模型放置在海量信息资源中进行快速匹配，提取出有价值的信息。信息资源的挖掘会消耗大量的计算资源，这些计算资源一般是从云平台上的按需获取的。首次通过应用模型提取出的信息，需要经过实际业务的验证后，方可应用。

4.3，信息资源服务的推送：根据不同用户的订阅，自动将挖掘提取出的信息进行推送。政务大数据中心会按照用户所属部门、业务领域进行分组，将用户日常工作中可能会涉及到信息资源推送过去。用户也可以根据自身的需要和权限主动对感兴趣资源进行关注。

前述的方法描述和流程示意图仅被提供作为示例性的示例且其不意在需要或隐含必须以所给出的顺序执行上述操作或各个方面的步骤。如本领域的技术人员将明白的，可以以任何顺序来执行在前述方面中的框的顺序。诸如“其后”、“然后”、“接下来”等之类的词并不意在限制操作或步骤的顺序；这些词仅用于引导读者遍历对方法的描述。此外，任何对权利要求元素的单数引用，例如，使用冠词“一”、“一个”或“该”不被解释为将该元素限制为单数。

结合本文中公开的方面描述的各种说明性的逻辑框、模块、电路和算法步骤均可以实现成电子硬件、计算机软件或其组合。为了清楚地表示硬件和软件之间的可交换性，上文对各种说明性的组件、框、模块、电路和步骤均围绕其功能进行了总体描述。至于这种功能是实现成硬件还是实现成软件，取决于特定的应用和对整个系统所施加的设计约束。熟练的技术人员可以针对每个特定的应用，以变通的方式来实现所描述的功能，但是，这种实现决策不应被解释为引起脱离本发明的保护范围。

本发明实施例中的方法可以有效的通过将空间数据、业务数据、属性数据、工作流数据、要件数据等多源政务数据进行有效的融合，数据处理和应用方法进行有效的结合和应用，达到可以将数据处理、分析后将多源数据进行应用与展现于一体的智能化信息的传递，从而实现了将业务数据与二、三维图形数据进行有效的融合，实现多维度的立体化的数据信息呈现，辅助决策者进行议案的决策。不仅将所划分的各类信息以图文结合的形式进行展现。通过一种处理方法将政务数据进行数据预处理、数据存储与管理、计算处理、数据挖掘与分析、数据应用等步骤，能够协调各种预处理操作以保证快速高效处理大批量数据可以应用到统一的政务大数据平台上。满足规划的合理性与统筹性的需求，进一步辅助相关决策者为政务项目的规划提供有效的分析参考依据。通过信息化手段的规范管理，为信息服务系统建设做好铺垫，在持续推进信息化基础建设中提升保障服务能力，为全面推进信息化建设提供平台支撑和信息资源的实时性、完整性做好铺垫。改变人们的生活，推动着工业生产、城市建设以及国防工业的发展，达到真正的电子信息与地理信息技术相互融合，从而实现智慧城市概念的推广与应用。

提供所公开的方面的前述描述，以使本领域的任何技术人员能够实现或使用本发明。对于本领域技术人员来说，对这些方面的各种修改将是显而易见的，并且本文定义的总体原理也可以在不脱离本发明的精神和保护范围的情况下应用于其它实施例。因此，本发明不旨在受限于本文给出的方面，而是与符合与本文公开的原理和新颖特征相一致的最宽的范围。