一种城市数据可视化系统及其构建方法与流程

本发明涉及城市数据可视化系统构建领域，具体涉及一种城市数据可视化系统及其构建方法。

背景技术：

随着计算机和信息技术的迅猛发展和普及应用，行业应用系统的规模迅速扩大，行业应用所产生的数据呈爆炸性增长。动辄达到数百tb甚至数十至数百pb规模的行业/企业大数据已远远超出了现有传统的计算技术和信息系统的处理能力，因此，寻求有效的大数据处理技术、方法和手段已经成为现实世界的迫切需求。

技术实现要素：

本发明的目的在于提供一种城市数据可视化系统及其构建方法，用以解决企业获取信息过程的不规范资料收集、解读不准确、程序繁琐、容易造成遗漏的缺陷，以及现有技术中的数据库信息单一、不能精确到具体位点，不能提供严格的可溯源的依据证据的问题。

本发明一方面提供了一种城市数据可视化系统的构建方法，包括如下步骤：

数据收集步骤：通过gps、摄像头和/或传感器设备采集数据信息，编写网络爬虫从全网获取相关数据资源；

数据提取步骤：将所述数据资源进行分析分解，对数据资源进行脱敏并提取所需相关信息；

信息完善步骤：通过数据标签匹配，提取最新数据报告信息；

信息处理步骤：整合分析最新数据报告信息及数据标签，形成数据用户资源包；

库构建步骤：建立城市数据解读数据库，所述城市数据解读数据库包括人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签。

进一步的，所述数据收集步骤收集的数据具体包括：设备终端gps信号坐标数据、视频采集数据、网络爬虫爬取数据和设备终端软件应用下载数据。

进一步的，所述建立城市数据解读数据库具体包括：以web站点的方式，将html+bootstrap+css+js页面部署在基于python的轻量级web框架上，整个框架基于wsgi协议构建而成，对外提供统一的增删改查接口。

进一步的，所述城市数据解读数据库采用结构化储存，以便对数据集合进行分析，通过对某些特征集合做回归分类分析来获得隐藏在数据集后的规律。

本发明另一方面提供一种城市数据可视化系统，包括：

数据收集模块：用于通过gps、摄像头和/或传感器设备采集数据信息，通过网络爬虫从全网获取相关数据资源；

数据提取模块：用于将所述数据资源进行分析分解，对数据资源进行脱敏并提取所需相关信息；

信息完善模块：用于通过数据标签匹配，提取最新数据报告信息；

信息处理模块：用于整合分析最新数据报告信息及数据标签，形成数据用户资源包；

库构建模块：用于建立城市数据解读数据库，所述城市数据解读数据库包括人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签。

采用上述本发明技术方案的有益效果是：

本发明系统数据库实现了企业城市数据的解读过程流程化、规范化，提高了解读结果的准确性和完整性，本发明构建了一种基于地理位置的全方位信息数据库，该数据库针对人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签进行多维解读。

附图说明

图1为本发明城市数据可视化系统的构建方法流程图；

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。

如图1所示，本发明实施例提供了一种城市数据可视化系统的构建方法，包括如下步骤：

步骤s01，数据收集：通过gps、摄像头和/或传感器设备采集数据信息，编写网络爬虫从全网获取相关数据资源；

步骤s02，数据提取：将所述数据资源进行分析分解，对数据资源进行脱敏并提取所需相关信息；

步骤s03，信息完善：通过数据标签匹配，提取最新数据报告信息；

步骤s04，信息处理：整合分析最新数据报告信息及数据标签，形成数据用户资源包；

步骤s05，库构建：建立城市数据解读数据库，所述城市数据解读数据库包括人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签。

具体的，所述数据收集步骤收集的数据具体包括：设备终端gps信号坐标数据、视频采集数据、网络爬虫爬取数据和设备终端软件应用下载数据。

具体的，所述建立城市数据解读数据库具体包括：以web站点的方式，将html+bootstrap+css+js页面部署在基于python的轻量级web框架上，整个框架基于wsgi协议构建而成，对外提供统一的增删改查接口。

具体的，所述城市数据解读数据库采用结构化储存，以便对数据集合进行分析，通过对某些特征集合做回归分类分析来获得隐藏在数据集后的规律。

本发明另一实施例提供一种城市数据可视化系统，包括：

数据收集模块：用于通过gps、摄像头和/或传感器设备采集数据信息，通过网络爬虫从全网获取相关数据资源；

数据提取模块：用于将所述数据资源进行分析分解，对数据资源进行脱敏并提取所需相关信息；

信息完善模块：用于通过数据标签匹配，提取最新数据报告信息；

信息处理模块：用于整合分析最新数据报告信息及数据标签，形成数据用户资源包；

库构建模块：用于建立城市数据解读数据库，所述城市数据解读数据库包括人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签。

综上，本发明系统数据库实现了企业城市数据的解读过程流程化、规范化，提高了解读结果的准确性和完整性，本发明构建了一种基于地理位置的全方位信息数据库，该数据库针对人口属性、线下消费、游戏偏好、收入情况、地理位置、行业标签、教育标签和金融标签进行多维解读。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

技术特征：

技术总结
本发明涉及一种城市数据可视化系统及其构建方法，构建方法包括如下步骤：通过GPS、摄像头和/或传感器设备采集数据信息，编写网络爬虫从全网获取相关数据资源；将所述数据资源进行分析分解，对数据资源进行脱敏并提取所需相关信息；通过数据标签匹配，提取最新数据报告信息；整合分析最新数据报告信息及数据标签，形成数据用户资源包；建立城市数据解读数据库。本发明系统数据库实现了企业城市数据的解读过程流程化、规范化，提高了解读结果的准确性和完整性。

技术研发人员：臧立
受保护的技术使用者：苏州青铜时代数据科技有限公司
技术研发日：2018.08.01
技术公布日：2018.12.18