一种数据采集、处理和分析应用方法及装置与流程

本申请涉及数据采集、处理、分析应用技术领域，具体而言，涉及一种数据采集、处理和分析应用方法及装置。

背景技术

为了扩大销量和市场份额，企业或品牌商家时常会对产品、服务品质及购物者、消费者进行市场调研，并根据市场调研数据了解、洞察市场的现状和发展趋势，从而帮助企业及时制定、调整经营策略。

传统模式下，企业开展市场调研的方法或流程是：企业在各地投入大量人力、财力和物力遴选招募并培训项目参与人员(包括但不限于项目执行人员和调研对象/被访者)，再由其携带大量的纸质调查问卷，走街串巷、挨家挨户通过纸、笔结合拍照、录音、录像等方式开展调研项目或数据采集项目执行工作。之后回收汇总这些纸质问卷以及影像、照片和录音等资料结果，再通过人工手动录入、处理、分析成电子版文字、图表等格式的数据报告。

以上传统方法或流程涉及的项目参与人员(包括但不限于项目执行人员和调研对象/被访者)之招募、遴选、培训、数据采集或执行、后期处理分析等环节存在诸多弊端或痛点：包括但不限于遴选招募项目参与人员的效率和投入产出低导致其专业度低、耗时、费力、成本高、数据失真甚至人为编造数据进行作假等。由此导致数据使用者或企业客户抱怨或投诉不断，也在很大程度上阻碍了整个行业的发展进步。

技术实现要素：

有鉴于此，本申请实施例的目的在于提供一种数据采集、处理和分析应用方法及装置，通过移动互联网基于地理位置服务的技术、大数据处理分析、人工智能影音识别、云存储平台、云计算等技术进行自动化人员招募筛选、影音识别、处理、分析和显示，精准、高效遴选匹配符合条件的专业人员参与项目，大幅提高数据质量和精准度，有效降低人力、财力、物力、时间和运营管理成本，缩短项目周期，提升数据分析及可视化等应用价值，从而提高了数据使用者和企业客户的整体满意度，推进了整个行业的发展进步。

第一方面，本申请实施例提供了一种数据采集、处理和分析应用方法，包括：

获取调研项目或数据采集项目的项目参与用户的属性信息；其中，所述属性信息至少包括以下信息中的一种或多种：注册信息和测试结果信息；

根据所述项目参与用户的属性信息以及各属性信息所占的权重值，确定每个所述项目参与用户的级别信息；

针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据；

通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理，并将所述已采集数据的处理结果进行可视化显示。

结合第一方面，本申请实施例提供了第一方面的第一种可能的实施方式，其中，所述通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理，包括：

针对视频类型和图片类型的已采集数据，识别并提取每帧图像的图像特征，并从提取的所述图像特征中选取目标对象的属性信息，并根据所述目标对象的属性信息，确定所述目标对象的销售信息，并将所述目标对象的销售信息存储到内容数据库中；和/或，扫描二维码、条形码图片，读取所述二维码、条形码图片中存储的所述目标对象的商品信息和流通信息，并将所述目标对象的商品信息和流通信息存储到内容数据库中；

针对音频类型的已采集数据，调用音频转换工具将音频文件转换为文本文件，并从所述文本文件中选择所述目标对象的销售信息、服务沟通信息、商品信息、流通信息，并将所述目标对象的销售信息、服务沟通信息、商品信息和流通信息存储到内容数据库中。

结合第一方面，本申请实施例提供了第一方面的第二种可能的实施方式，其中，所述将所述已采集数据的处理结果进行可视化显示，包括：

若同一调研项目或数据采集项目对应有多种类型或格式的已采集数据，则选取任一种目标类型的已采集数据，将该目标类型的已采集数据的处理结果写入预设的可视化显示模板中，并根据用户从预设的多种可视化显示方式中选择的目标可视化显示方式，对写入所述可视化显示模板中的处理结果进行可视化显示；其中，所述可视化显示模板用于描述进行可视化显示所需要的数据信息；

若检测到所述可视化显示模板中存在未填写的目标数据信息，则从其他类型的已采集数据的处理结果中获取所述目标数据信息，并将所述目标数据信息写入所述可视化显示模板中。

结合第一方面的第二种可能的实施方式，本申请实施例提供了第一方面的第三种可能的实施方式，其中，所述选取任一种目标类型的已采集数据之前，还包括：

从多种类型的已采集数据中选择优先级信息最高的目标类型的已采集数据的处理结果作为质检数据，通过所述质检数据对待检测的其他类型的已采集数据的处理结果进行检测；以及，在检测到任一待检测的其他类型的已采集数据的处理结果与所述质检数据不匹配时，利用所述质检数据更新该待检测的其他类型的已采集数据的处理结果。

结合第一方面，本申请实施例提供了第一方面的第四种可能的实施方式，其中，所述获取调研项目或数据采集项目的项目参与用户的属性信息之前，还包括：

针对任一调研项目或数据采集项目，从预设的测试题库中选取与该调研项目或数据采集项目匹配的多道测试题目；

根据多道所述测试题目之间的逻辑关系，建立多道所述测试题目的网络拓扑结构；

向所述目标项目参与用户推送一级网络拓扑结构的测试题目，若检测到当前层级对应的下一级网络拓扑结构，则根据所述目标项目参与用户对当前层级测试题目的测试结果，向所述目标项目参与用户推送与当前层级的测试结果对应的下一级网络拓扑结构的测试题目，将该下一级网络拓扑结构作为当前层级，返回检测到当前层级对应的下一级网络拓扑结构的步骤，直至当前层级为网络拓扑结构的最后一级或者直至不存在当前层级对应的下一级网络拓扑结构；

根据用户对所述网络拓扑结构的多个测试题目的测试结果，确定所述测试结果信息。

结合第一方面的第二种可能的实施方式，本申请实施例提供了第一方面的第五种可能的实施方式，其中，所述已采集数据中携带有多维度属性信息；所述可视化显示模板的定制方法，包括：

提取选取的目标类型的已采集数据中的多维度属性信息；

基于多维度属性信息中的每一个维度属性信息，对所述目标类型的已采集数据进行整合处理；

根据用户选择的待显示的目标维度的属性信息，生成包括所述目标维度的属性信息的可视化显示模板。

结合第一方面，本申请实施例提供了第一方面的第六种可能的实施方式，其中，所述获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据之后，还包括：

获取参与调研项目或数据采集项目的项目参与用户的参与属性信息；其中，所述参与属性信息至少包括以下信息中的一种或多种：活跃度信息和项目任务执行信息；

根据所述项目参与用户的参与属性信息以及各参与属性信息所占的权重值，持续动态化实时更新每个所述项目参与用户的级别信息。

第二方面，本申请实施例还提供了一种数据处理装置，包括：

第一获取模块，用于获取调研项目或数据采集项目的项目参与用户的属性信息；其中，所述属性信息至少包括以下信息中的一种或多种：注册信息和测试结果信息；

确定模块，用于根据所述项目参与用户的属性信息以及各属性信息所占的权重值，确定每个所述项目参与用户的级别信息；

第二获取模块，用于针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据；

处理模块，用于通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理；

显示模块，用于将所述已采集数据的处理结果进行可视化显示。

结合第二方面，本申请实施例提供了第二方面的第一种可能的实施方式，其中，所述处理模块，具体用于：

针对视频类型和图片类型的已采集数据，识别并提取每帧图像的图像特征，并从提取的所述图像特征中选取目标对象的属性信息，并根据所述目标对象的属性信息，确定所述目标对象的销售信息，并将所述目标对象的销售信息存储到内容数据库中；和/或，扫描二维码、条形码图片，读取所述二维码、条形码图片中存储的所述目标对象的商品信息和流通信息，并将所述目标对象的商品信息和流通信息存储到内容数据库中；

针对音频类型的已采集数据，调用音频转换工具将音频文件转换为文本文件，并从所述文本文件中选择所述目标对象的销售信息、服务沟通信息、商品信息、流通信息，并将所述目标对象的销售信息、服务沟通信息、商品信息和流通信息存储到内容数据库中。

结合第二方面，本申请实施例提供了第二方面的第二种可能的实施方式，其中，所述显示模块，具体用于：

若同一调研项目或数据采集项目对应有多种类型或格式的已采集数据，则选取任一种目标类型的已采集数据，将该目标类型的已采集数据的处理结果写入预设的可视化显示模板中，并根据用户从预设的多种可视化显示方式中选择的目标可视化显示方式，对写入所述可视化显示模板中的处理结果进行可视化显示；其中，所述可视化显示模板用于描述进行可视化显示所需要的数据信息；

若检测到所述可视化显示模板中存在未填写的目标数据信息，则从其他类型的已采集数据的处理结果中获取所述目标数据信息，并将所述目标数据信息写入所述可视化显示模板中。

本申请实施例提供的一种数据采集、处理和分析应用方法及装置，包括：获取调研项目或数据采集项目的项目参与用户的属性信息；根据项目参与用户的属性信息以及各属性信息所占的权重值，确定每个项目参与用户的级别信息；针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对调研项目或数据采集项目的至少一种类型的数据；通过与每种类型的已采集数据对应的处理工具对该已采集数据进行处理，并将已采集数据的处理结果可视化显示。这样，通过自动招募项目参与用户以及自动对项目参与用户进行筛选，使符合筛选条件的项目参与用户参与项目任务，由此大幅节省了传统模式下的人力、时间、运营管理等成本、数据实时传输提高了时效性、缩短了运营周期、大幅提高了数据质量和精准度、尤其以更高效严格的准入机制获取了海量符合条件的用户。同时，基于不同的数据处理工具和程序，自动批量处理了符合条件的项目参与用户输入的不同类型或格式的数据，更进一步解放了人力、降低了人工操作成本、提高了数据录入、质检等工序的工作效率和精准度，进一步提高了数据质量、缩短了项目任务的整体运营周期。

为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本申请实施例所提供的一种数据采集、处理和分析应用方法系统的结构示意图。

图2示出了本申请实施例所提供的一种数据采集、处理和分析应用方法的流程图。

图3示出了本申请实施例所提供的另一种数据采集、处理和分析应用方法的流程图。

图4示出了本申请实施例所提供的另一种数据采集、处理和分析应用方法的流程图。

图5示出了本申请实施例所提供的另一种数据采集、处理和分析应用方法的流程图。

图6示出了本申请实施例所提供的一种数据采集、处理和分析应用方法的整体流程图。

图7示出了本申请实施例所提供的一种数据采集、处理和分析应用装置的结构示意图。

图8示出了本申请实施例所提供的另一种数据采集、处理和分析应用装置的结构示意图。

图9示出了本申请实施例所提供的另一种数据采集、处理和分析应用装置的结构示意图。

图10示出了本申请实施例所提供的另一种数据采集、处理和分析应用装置的结构示意图。

图11示出了本申请实施例所提供的另一种数据采集、处理和分析应用装置的结构示意图。

图12示出了本申请实施例所提供的一实施例所提供的计算机设备40的结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

如图1所示，本申请实施例提供的一种数据采集、处理和分析应用装置，包括第一终端设备10、第二终端设备20和服务器30；第一终端设备10和第二终端设备20分别和服务器30通信连接。其中，第一终端设备10面向项目参与用户，该第一终端设备10中预先安装有应用(application，app)，项目参与用户通过在该app上注册个人信息，完善个人资料可以领取并完成调研任务及其他数据采集任务。第二终端设备20面向企业用户或数据使用方，该第二终端设备20可通过用户名及密钥登录web端或预先安装的应用(application，app)，企业用户或数据使用方通过在该web端或app上注册信息，完善资料后可以发布调研项目或数据采集项目，并设定项目及任务的属性、条件(包括但不限于任务类型、有效期、地点、可见范围、可执行范围、领取条件或和任务条件相匹配的用户的等级要求、可领取次数、可执行次数、任务限额和报酬等)。

如图2所示，本申请实施例提供了一种数据采集、处理、分析应用方法，应用于服务器，所述方法包括如下步骤：

s101、获取调研项目或数据采集项目的项目参与用户的属性信息；其中，所述属性信息至少包括以下信息中的一种或多种：注册信息和测试结果信息。

本申请实施例中，项目参与用户包括调研员(例如：项目执行人员等)或被访者(例如：消费者、购物者及某些特定行业领域或专长的人员等)。。这里，这些海量项目参与用户主要包括：行业内的资深或专业从业者和一部分拥有闲暇时间的兼职人员(比如有空闲时间的智能手机用户、大学生、全职妈妈等)。

项目参与用户需要预先在第一终端设备上下载app，并在app上完成注册，注册信息包括每个用户完善的个人基本信息(如手机号、用户名等)、学历、职业、个人收入、家庭收入等标签信息。此外用户的注册时间和地点等信息将由服务器端另行自动标记。第一终端设备将用户的注册信息发送给服务器，由服务器记录所有注册用户的信息。

另外，针对不同的调研项目或数据采集项目，可根据项目要求设置对项目参与用户的测试题目，项目参与用户需要对测试题目进行作答，终端设备将项目参与用户对测试题目的作答结果返回给服务器，以作进一步的自动计算和测试结果判定。

本申请中，服务器中集成基于移动位置服务(locationbasedservice，lbs)的程序算法，服务器在获取到项目参与用户的属性信息之后，获取项目参与用户的地理位置信息，服务器根据实时判断项目参与用户的地理位置信息和目标项目任务的标准位置信息的距离是否在可见或可执行范围内，如果在，服务器向对应的项目任务参与用户发布项目和任务或者允许用户可见可执行，该项目参与用户就能领取执行项目和任务，如果不在，服务器就不向对应的项目参与用户发布项目和任务，用户也看不见任务、更无法领取执行项目和任务。此外，用户也可以根据自己的位置信息与目标项目任务的标准位置信息的距离的比较结果，来自主筛选附近的项目和任务。

服务器通过实时计算判断项目参与用户的地理位置信息和目标项目任务的标准位置信息的距离，来给项目用户自动推送附近的项目和任务，或者用户能自动筛选项目的方式，能够提高项目的完成效率和项目的完成质量。

s102、根据所述项目参与用户的属性信息以及各属性信息所占的权重值，确定每个所述项目参与用户的级别信息。

本申请实施例中，每个属性信息具有预先配置好的权重值，根据用户的属性信息所得的分值与各属性信息所占的权重值的乘积，计算每个项目参与用户的级别信息和经验值，得到每个项目参与用户的用户标签。比如，用户1为10级，对应的经验值为白银；用户2为20级，对应的经验值为黄金；用户3为30级，对应的经验值为钻石。

其中，不同的调研项目或数据采集项目对应有自己的准入执行条件，只有用户标签符合该调研项目或数据采集项目的条件的用户，才能执行该调研项目或数据采集项目。比如，某汽车调研项目或数据采集项目对应的用户准入参与条件为30级和经验值为钻石，那么在用户1到用户3中只有用户3才符合该汽车调研项目或数据采集项目的要求，即能够参与执行该汽车调研项目或数据采集项目。

通过这样的对不同调研项目或数据采集项目对应的条件去筛选针对该调研项目或数据采集项目的参与用户的准入机制，便于今后项目任务的定向分发、匹配(通过系统消息、短信、微信、邮件等方式)，能够大幅提高投入产出投资回报率(returnoninvestment，roi)和工作效率。

s103、针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据。

本申请实施例中，针对不同的调研项目或数据采集项目，符合某一调研项目或数据采集项目的项目参与用户能够基于该调研项目或数据采集项目的任务，在终端设备的app上输入针对不同任务的至少一种类型的数据。

比如，某消费品行业(包括但不限于食品饮料日用化妆品等快速消费品、珠宝首饰箱包等奢侈品、汽车、手机电脑等电子消费品等领域)的调研项目或数据采集项目对应有多个任务，这些任务可以是：任务1：调研消费者或购物者对企业或商家产品及服务的评价、使用、感受和反馈；任务2：调查销售商的产品销售、价格、窜货、库存、促销等情况；任务3：体验评价商家的硬件环境和销售人员或客服人员的服务品质等。符合汽车调研项目或数据采集项目对应的调研条件的项目参与用户在终端设备的app上输入数据结果，终端设备接收到的数据发送给服务器。其中，针对每个任务，用户可以输入多种类型或格式的数据结果，这些类型包括但不限于：图片(比如照片、二维码、条形码)、文字、音频(比如录音)和视频等。

再比如，奶制品和纸尿裤等消费品行业的调研项目或数据采集项目对应有多个任务，这些任务可以是：任务1：这些产品的销售区域、具体地点(如大卖场、超市、便利店、食杂店等业态渠道)、和其销售商家的基本信息；任务2：这些产品的铺货状态、流通信息、销售情况、促销活动及人员状态信息。符合以上项目对应条件的项目参与用户即可在终端设备的app上领取执行对应的项目任务，输入数据，终端设备将符合条件的项目参与用户输入的数据发送给服务器。以上各种类型或格式的已采集数据包括但不限于：图片(照片、二维码、条形码)、文字、音频(比如录音)、和视频等。

s104、通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理，并将所述已采集数据的处理结果进行可视化显示。

本申请实施例中，服务器在接收到终端设备发送的数据结果后，需要对这些数据进行处理、分析，最终将这些已采集数据进行可视化显示。这里，针对不同类型的已采集数据，服务器会调用不同类型的工具进行处理和分析。比如，针对图片类的数据，服务器会调用图像处理算法解析图片中的数据信息(比如文字、颜色、轮廓等要素信息)；针对音频类的数据，服务器会调用音频解析软件解析音频中的数据信息；针对视频类的数据，服务器会调用视频解析软件解析视频中的数据信息。

另外，本申请实施例中有预设的数据结构，对数据进行解析，通过预设的数据结构去存储解析后的数据信息，目的是便于对解析得到的数据信息进行可视化显示处理。

本申请实施例中预先提供多种类型的可视化选项，企业用户可以根据自身的需要去选择想要使用的目标类型的可视化选项，最终，通过目标类型的可视化方法去显示解析的数据信息。这里多种类型的可视化选项包括但不限于地图、热力图、柱状图、条形图、直方图、饼图、散点图、折线图、雷达图、表格、静态或动态图表、插图或以上图表之组合图等。

进一步的，本申请实施例提供的数据采集、处理和分析应用方法中，步骤104中，所述通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理，包括：

针对视频类型和图片类型的已采集数据，调用相应的处理算法进行处理：

(1)针对视频类型和照片类的图片，提取每帧视频图像或者每个照片图像中的图像特征，并从提取的所述图像特征中选取目标对象(该目标对象包括但不限于人体、物品等静态)的属性信息(属性信息包括但不限于产品品类、品牌、品名、生产厂商和日期、价格等文字描述、logo等图案图形、颜色、物理轮廓尺寸、人物面部及体貌特征等)，并根据所述目标对象的属性信息，确定所述目标对象的销售信息，并将所述目标对象的销售信息存储到内容数据库中；和/或，扫描二维码、条形码图片，读取所述二维码、条形码图片中存储的所述目标对象的商品信息和流通信息，并将所述目标对象的商品信息和流通信息存储到内容数据库中。

这里，项目参与用户拍摄的照片中通常会包括很多信息(如目标对象信息和其他对象的信息)，因此，针对每一张照片类的图片，服务器需要调用图像处理算法提取该图片中的图像特征，并从提取的图像特征中选取与预先存储的目标对象的标准图像特征相匹配的目标图像特征，这样就确定了目标对象。在确定了目标对象之后，根据提取的图像特征进一步确定目标对象的销售信息。其中，销售信息包括但不限于：商品的铺货缺货状态、数量、规格或型号、价格、货架上所占的排面数、各产品品类的信息、本品及竞品的份额、生产日期及市场流转状态等。比如根据预存的货架的特征，从提取的图像特征中选取货架特征，从而确定货架信息。或者根据预存的产品的特征，从提取的图像特征中选取产品特征，从而确定产品相关的信息。

(2)针对二维码或条形码类的图片，扫描二维码或条形码图片，读取所述二维码或条形码图片中存储的所述目标的商品信息、物流及区域流通信息，并将所述目标的商品信息和流通信息存储到内容数据库中，进而自动判断每个产品的真假优劣等级、是否有价格不规范、是否有区域间窜货等扰乱商家正常经营或市场秩序等情况发生。

本申请实施例中，二维码或条形码图片中存储有商品的商品信息和流通信息，因此，针对二维码或条形码图片，调用二维码或条形码读取工具，直接读取二维码或条形码中存储的商品信息和流通信息。这里的商品信息可以是：商品的名称、规格、生产地、配方配料、生产日期、价格等；这里的物流及流通信息可以是：商品生产地到当前销售地所经过的一系列的流通信息及在各区域的进货、发货、销售状态等信息。

针对音频类型的已采集数据，调用音频转换工具将音频文件转换为文本文件，并从所述文本文件中选择所述目标的服务沟通互动信息、销售信息、商品信息和流通信息，并将以上信息存储到内容数据库中。

本申请实施例中，服务器能够对用户输入的大数据进行智能识别、处理和应用，具体为用户通过终端设备向服务器提交的海量文本、图片、录音、视频等结构化或非结构化的数据信息，服务器通过调用相应的处理工作进行智能化的标记、识别、解析、重构、整合与处理，从而能按照特定的格式或商业需求进行批量级的输出与呈现。

进一步的，本申请实施例提供的数据采集、处理和分析应用方法中，步骤104，所述将所述已采集数据的处理结果进行可视化显示，包括：

若同一调研项目或数据采集项目对应有多种类型或格式的已采集数据，则选取任一种目标类型的已采集数据，将该目标类型的已采集数据的处理结果写入预设的可视化显示模板中，并根据用户从预设的多种可视化显示方式中选择的目标可视化显示方式，对写入所述可视化显示模板中的处理结果进行可视化显示；其中，所述可视化显示模板用于描述进行可视化显示所需要的数据信息；

若检测到所述可视化显示模板中存在未填写的目标数据信息，则从其他类型的已采集数据的处理结果中获取所述目标数据信息，并将所述目标数据信息写入所述可视化显示模板中。

本申请实施例中，所述已采集数据中携带有多维度属性信息，企业用户可以针对不同的视化显示模板进行私有化定制，如图3所示，具体定制方法包括：

s201、提取选取的目标类型的已采集数据中的多维度属性信息。

本申请实施例中的，每个数据的多维度属性信息可以为地理位置信息(经纬度地址，具体细化到省市乡镇街直至门牌号等信息)、时间信息(细化到年月日时分秒等)、行业、渠道、门店属性信息(营业面积、营业时间、收银台数量、在岗服务员人数等)、周边商圈、周围人口数量、经济发达或景气指数等宏微观信息。

s202、基于多维度属性信息中的每一个维度属性信息，对所述目标类型的已采集数据进行整合处理。

本申请实施例中，服务器基于上述每一个维度对大数据进行智能化的建模、重构和整合。

s203、根据用户选择的待显示的目标维度的属性信息，生成包括所述目标维度的属性信息的可视化显示模板。

本申请可视化程序(包括但不限于地图、热力图、柱状图、条形图、直方图、饼图、散点图、折线图、雷达图、表格、静态或动态图表、插图或以上图表之组合图)上显示具有多维度属性信息的所述数据。

本申请实施例中，在云平台服务器对大量的数据进行整合处理之后，企业用户可以将任一维度属性作为可视化选项，在接收到用户的可视化选项之后，服务器基于该可视化选项将大量的数据在上述可视化程序上进行可视化呈现，同时，这些数据也包括其他维度标签信息。通过这种方式，形成自主知识产权的标准化的高价值产品服务包，从而帮助不同行业的生产制造型企业、连锁经营品牌商家做出精准的商圈规划、经销与终端渠道的投资开店筹备、广告或营销定位等数据决策支持。

作为一种可选的实施方式，本申请实施例中，首先通过文本去填写可视化显示模板，若可视化显示模板中存在未填写的目标对象的数据信息，在通过解析图片、二维码、条形码、音频或视频等数据后，去自动补充并优化可视化显示模板中未填写的目标对象的数据信息。

进一步的，本申请实施例提供的数据采集、处理和分析应用方法中，所述选取任一种目标类型的已采集数据之前，还包括：

从多种类型的已采集数据中选择优先级信息最高的目标类型的已采集数据的处理结果作为质检数据，通过所述质检数据对待检测的其他类型的已采集数据的处理结果进行检测；以及，在检测到任一待检测的其他类型的已采集数据的处理结果与所述质检数据不匹配，则利用所述质检数据更新该待检测的其他类型的已采集数据的处理结果。

本申请实施例中，为了保证写入可视化显示模板中信息的高准确度和高可靠性，对于使同一项目或任务的多种类型的已采集数据的处理结果进行相互检验，当多种类型的已采集数据的处理结果不一致时，将优先级最高的已采集数据的处理结果写入可视化显示模板中。

进一步的，如图4所示，本申请实施例提供的数据采集、处理、分析应用方法中，步骤101，所述获取调研项目或数据采集项目的项目参与用户的属性信息之前，还包括：

s301、针对任一调研项目或数据采集项目，从预设的测试题库中选取与该调研项目或数据采集项目匹配的多道测试题目。

本申请实施例中，每个调研项目或数据采集项目通常对应有若干道测试题目。

s302、根据多道所述测试题目之间的逻辑关系，建立多道所述测试题目的网络拓扑结构。

s303、向所述目标项目参与用户推送一级网络拓扑结构的测试题目，若检测到当前层级对应的下一级网络拓扑结构，则根据所述目标项目参与用户对当前层级测试题目的测试结果，向所述目标项目参与用户推送与当前层级的测试结果对应的下一级网络拓扑结构的测试题目，将该下一级网络拓扑结构作为当前层级，返回检测到当前层级对应的下一级网络拓扑结构的步骤，直至当前层级为网络拓扑结构的最后一级或者直至不存在当前层级对应的下一级网络拓扑结构。

举例说明：一层网络拓扑的题目有两个，二层网络拓扑的题目有6个，如果用户答对一层网络拓扑的题目中的一级题目1，那么推送该用户二层网络拓扑二级题目1、二级题目2和二级题目3；而如果用户答对一层网络拓扑的题目中的一级题目2，那么推送该用户二层网络拓扑二级题目4、二级题目5和二级题目6。

s304、根据用户对所述网络拓扑结构的多个测试题目的测试结果，确定所述测试结果信息。

进一步的，如图5所示，本申请实施例提供的数据采集、处理和分析应用方法中，所述获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据之后，还包括：

s401、获取参与调研项目或数据采集项目的项目参与用户的参与属性信息；其中，所述参与属性信息至少包括以下信息中的一种或多种：活跃度信息和项目任务执行信息。

本申请实施例中，活跃度信息包括但不限于任一时间区间的登录次数、在线时长，项目任务执行信息包括但不限于项目任务的预定数量、实际执行数量、质量或合格率、时效性、完成率、完成项目任务的难度或专业度系数、相应的收入报酬等。

s402、根据所述项目参与用户的参与属性信息以及各参与属性信息所占的权重值，持续动态化实时更新每个所述项目参与用户的级别信息。

结合步骤401和步骤402，服务器可以获取每个项目任务参与用户的活跃度信息(包括但不限于任一时间区间的登录次数、在线时长)和项目任务执行信息(包括但不限于项目任务的预定数量、实际执行数量、质量或合格率、时效性、完成率、完成项目任务的难度或专业度系数、相应的收入报酬等)，通过这些信息的得分值和这些信息各自对应的权重值，去动态实时更新每个所述项目参与用户的级别信息，从而更加完善每个所述项目参与用户的级别信息。

本申请实施例提供的一种数据采集、处理和分析应用方法，包括：获取调研项目或数据采集项目的项目参与用户的属性信息；根据项目参与用户的属性信息以及各属性信息所占的权重值，确定每个项目参与用户的级别信息；针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对调研项目或数据采集项目的至少一种类型的数据；通过与每种类型的已采集数据对应的处理工具，对已采集数据进行处理，并将已采集数据的处理结果可视化显示。这样，通过自动招募项目任务参与用户以及自动对项目参与用户进行筛选甄别、招募，使符合筛选条件的项目参与用户参与项目任务(包括但不限于项目任务的预定、执行完成、质检后的确认或异议申诉互动、申请提现、完成结算、评价分享等流程工序)，由此大幅节省了传统模式下的人力、时间、运营管理等成本、数据实时传输提高了时效性、缩短了运营周期、大幅提高了数据质量和精准度、尤其以更高效严格的准入机制获取了海量专业的用户。同时，基于不同的数据处理工具和程序，自动批量处理了符合条件的项目参与用户输入的不同类型或格式的数据，更进一步解放了人力、降低了人工操作成本、提高了数据录入、质检等工序的工作效率和精准度，进一步提高了数据质量、缩短了项目任务的整体运营周期。

如图6所示，下面对本申请实施例提供的数据采集、处理和分析应用方法进行整体说明，包括如下步骤：

a、项目参与人员(包括但不限于执行人员和调查对象被访者)的多维度招募筛选准入和培训互动机制：通过问卷逻辑及任务属性设置的方式计算得到每个项目参与人员的用户标签，这样，可以从中选出对应于不同项目的合格用户进行后续的数据采集。在培训互动机中，针对不同类型的项目，可以对项目参与人员进行线上培训以及互动交流咨询答疑等。

b、针对任一类型的项目，通过该项目对应的合格的项目参与人员进行针对该项目的数据采集、抓取录入并对录入的数据进行质检及处理。其中，针对不同类型的数据，可调用不同的处理工具进行处理，也即通过人工智能影音识别软件装置自动完成摘录图像和语音中的文字、图表等信息。同时，还能实现多种数据之间的相互质检，即检查是否遗漏、错误等。同时，质检后项目参与人员可在自己账户查看报酬，并在线申请提现、结算确认或异议申诉。

c、服务器针对每一类型的数据进行大数据级的处理、统计分析，并将处理结果通过多种展示方式呈现给数据需求方、使用方或企业用户。

本申请实施例还提供了一种数据采集、处理和分析应用装置，如图7所示，用于执行数据采集、处理和分析应用方法，所述装置包括：

第一获取模块11，用于获取调研项目或数据采集项目的项目参与用户的属性信息；其中，所述属性信息至少包括以下信息中的一种或多种：注册信息和测试结果信息；

确定模块12，用于根据所述项目参与用户的属性信息以及各属性信息所占的权重值，确定每个所述项目参与用户的级别信息；

第二获取模块13，用于针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对所述调研项目或数据采集项目的至少一种类型的数据；

处理模块14，用于通过与每种类型的已采集数据对应的处理工具，对所述已采集数据进行分析处理；

显示模块15，用于将所述已采集数据的处理结果进行可视化显示。

进一步的，本申请实施例提供的数据处理装置中，处理模块14，具体用于：

针对视频类型和图片类型的已采集数据，识别并提取每帧图像的图像特征，并从提取的所述图像特征中选取目标对象的属性信息，并根据所述目标对象的属性信息，确定所述目标对象的销售信息，并将所述目标对象的销售信息存储到内容数据库中；和/或，扫描二维码、条形码图片，读取所述二维码、条形码图片中存储的所述目标对象的商品信息和流通信息，并将所述目标对象的商品信息和流通信息存储到内容数据库中；

针对音频类型的已采集数据，调用音频转换工具将音频文件转换为文本文件，并从所述文本文件中选择所述目标对象的销售信息、服务沟通信息、商品信息、流通信息，并将所述目标对象的销售信息、服务沟通信息、商品信息和流通信息存储到内容数据库中。

进一步的，本申请实施例提供的数据处理装置，显示模块15具体用于：

若同一调研项目或数据采集项目对应有多种类型或格式的已采集数据，则选取任一种目标类型的已采集数据，将该目标类型的已采集数据的处理结果写入预设的可视化显示模板中，并根据用户从预设的多种可视化显示方式中选择的目标可视化显示方式，对写入所述可视化显示模板中的处理结果进行可视化显示；其中，所述可视化显示模板用于描述进行可视化显示所需要的数据信息；

若检测到所述可视化显示模板中存在未填写的目标数据信息，则从其他类型的已采集数据的处理结果中获取所述目标数据信息，并将所述目标数据信息写入所述可视化显示模板中。

进一步的，如图8所示，本申请实施例提供的数据处理装置，还包括：

质检模块16，用于从多种类型的已采集数据中选择优先级信息最高的目标类型的数据的处理结果作为质检数据，通过所述质检数据对待检测的其他类型的已采集数据的处理结果进行检测；以及，在检测到任一待检测的其他类型的已采集数据的处理结果与所述质检数据不匹配时，利用所述质检数据更新该待检测的其他类型的已采集数据的处理结果。

进一步的，如图9所示，本申请实施例提供的数据处理装置，还包括：

选取模块17，用于针对任一调研项目或数据采集项目，从预设的测试题库中选取与该调研项目或数据采集项目匹配的多道测试题目；

建立模块18，用于根据多道所述测试题目之间的逻辑关系，建立多道所述测试题目的网络拓扑结构；

推送模块19，用于向所述目标项目参与用户推送一级网络拓扑结构的测试题目，若检测到当前层级对应的下一级网络拓扑结构，则根据所述目标项目参与用户对当前层级测试题目的测试结果，向所述目标项目参与用户推送与当前层级的测试结果对应的下一级网络拓扑结构的测试题目，将该下一级网络拓扑结构作为当前层级，返回检测到当前层级对应的下一级网络拓扑结构的步骤，直至当前层级为网络拓扑结构的最后一级或者直至不存在当前层级对应的下一级网络拓扑结构；

确定模块20，用于根据用户对所述网络拓扑结构的多个测试题目的测试结果，计算确定所述测试结果信息。

进一步的，如图10所示，本申请实施例提供的数据处理装置中，所述已采集数据中携带有多维度属性信息；所述装置还包括：

提取模块21，用于提取选取的目标类型的已采集数据中的多维度属性信息；

整合处理模块22，用于基于多维度属性信息中的每一个维度属性信息，对所述目标类型的已采集数据进行整合处理；

生成模块23，用于根据用户选择的待显示的目标维度的属性信息，生成包括所述目标维度的属性信息的可视化显示模板。

进一步的，如图11所示，本申请实施例提供的数据处理装置，还包括：

第三获取模块24，用于获取参与调研项目或数据采集项目的项目参与用户的参与属性信息；其中，所述参与属性信息至少包括以下信息中的一种或多种：活跃度信息和项目任务执行信息。

更新模块25，用于根据所述项目参与用户的参与属性信息以及各参与属性信息所占的权重值，持续动态化实时更新每个所述项目参与用户的级别信息。

本申请实施例提供的一种数据处理装置，包括：获取调研项目或数据采集项目的项目参与用户的属性信息；根据项目参与用户的属性信息以及各属性信息所占的权重值，确定每个项目参与用户的级别信息；针对任一调研项目或数据采集项目，获取级别信息满足该调研项目或数据采集项目所对应的预设条件的目标项目参与用户输入的针对调研项目或数据采集项目的至少一种类型的数据；通过与每种类型的已采集数据对应的处理工具，对已采集数据进行处理，并将已采集数据的处理结果可视化显示。这样，通过自动招募项目参与用户以及自动对项目参与用户进行筛选，使符合筛选条件的项目参与用户参与项目任务，节省了人力成本，缩短了运营周期，提高了已采集数据的数据质量。同时基于不同的处理工具，自动处理符合条件的项目参与用户输入的不同类型的已采集数据，更进一步降低了人力成本，缩短了运营周期，由此大幅节省了传统模式下的人力、时间、运营管理等成本、数据实时传输提高了时效性、缩短了运营周期、大幅提高了数据质量和精准度、尤其以更高效严格的准入机制获取了海量专业的用户。同时，基于不同的数据处理工具和程序，自动批量处理了符合条件的项目参与用户输入的不同类型或格式的数据，更进一步解放了人力、降低了人工操作成本、提高了数据录入、质检等工序的工作效率和精准度，进一步提高了数据质量、缩短了项目任务的整体运营周期。

图12为本申请一实施例提供的计算机设备40的结构示意图，如图12所示，用于执行图2中的数据采集、处理和分析应用方法，该设备包括存储器401、处理器402及存储在该存储器401上并可在该处理器402上运行的计算机程序，其中，上述处理器402执行上述计算机程序时实现上述数据采集、处理和分析应用方法的步骤。

具体地，上述存储器401和处理器402能够为通用的存储器和处理器，这里不做具体限定，当处理器402运行存储器401存储的计算机程序时，能够执行上述数据采集、处理和分析应用方法。

对应于图2中的数据采集、处理和分析应用方法，本申请实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述数据采集、处理和分析应用方法的步骤。

具体地，该存储介质能够为通用的存储介质，如移动磁盘、硬盘等，该存储介质上的计算机程序被运行时，能够执行上述数据采集、处理和分析应用方法。

本申请实施例所提供的数据采集、处理和分析应用装置可以为设备上的特定硬件或者安装于设备上的软件或固件等。本申请实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，前述描述的系统、装置和单元的具体工作过程，均可以参考上述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请提供的实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释，此外，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

最后应说明的是：以上所述实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。