数据查询方法、装置、电子设备及计算机可读存储介质与流程

文档序号:22833492发布日期:2020-11-06 16:23阅读:99来源:国知局
数据查询方法、装置、电子设备及计算机可读存储介质与流程

本申请涉及数据处理技术领域,具体而言,本申请涉及一种数据查询方法、装置、电子设备及计算机可读存储介质。



背景技术:

随着计算机网络高速的发展,不同领域下产生的数据呈指数增长,对大规模数据的分析变得越来越重要。

目前的大数据平台中,虽然能够对大规模数据进行存储和批量处理,但是无法提供高效的交互式查询,用户在进行大规模数据量下的数据查询时,耗时较长,效率低下,无法满足实际的使用需求。



技术实现要素:

本申请的目的旨在至少能解决上述的技术缺陷之一。本申请所采用的技术方案如下:

第一方面,本申请实施例提供了一种数据查询方法,该方法包括:

当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;

当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。

可选地,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据,包括:

基于数据查询请求中携带的目标维度以及目标度量生成查询指令;

通过查询指令在存储有目标cube模型的hbase数据库中查询目标数据。

可选地,通过以下方式创建cube模型:

基于指定维度与指定度量,对源数据进行cube预计算构建cube模型。

可选地,上述方法还包括:

确定用户选择的交互图表;

基于交互图表对目标数据进行展示。

可选地,上述方法还包括:

向终端设备发送目标cube模型的维度以及度量,以使终端设备向用户展示目标cube模型的维度以及度量,并基于用户选取的目标维度以及目标度量生成数据查询请求。

可选地,上述方法还包括:

获取用户提交的过滤条件;

基于条件对目标数据进行过滤。

第二方面,本申请实施例提供了一种数据查询装置,该装置包括:

模型获取模块,用于在接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;

数据查询模块,用于在接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。

可选地,数据查询模块在基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据时,具体用于:

基于数据查询请求中携带的目标维度以及目标度量生成查询指令;

通过查询指令在存储有目标cube模型的hbase数据库中查询目标数据。

可选地,通过以下方式创建cube模型:

基于指定维度与指定度量,对源数据进行cube预计算构建cube模型。

可选地,上述装置还包括图表选择模块,图表选择模块用于:

确定用户选择的交互图表;

基于交互图表对目标数据进行展示。

可选地,上述装置还包括模型信息发送模块,模型信息发送模块用于:

向终端设备发送目标cube模型的维度以及度量,以使终端设备向用户展示目标cube模型的维度以及度量,并基于用户选取的目标维度以及目标度量生成数据查询请求。

可选地,上述装置还包括数据过滤模块,数据过滤模块用于:

获取用户提交的过滤条件;

基于条件对目标数据进行过滤。

第三方面,本申请实施例提供了一种电子设备,该电子设备包括:处理器和存储器;

存储器,用于存储操作指令;

处理器,用于通过调用操作指令,执行如本申请的第一方面的任一实施方式中所示的数据查询方法。

第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本申请的第一方面的任一实施方式中所示的数据查询方法。

本申请实施例提供的技术方案带来的有益效果是:

本申请实施例提供的方法,当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。本方案中,由于将数据构建为cube模型并进行存储,在查询数据时,能够通过获取目标cube模型,并基于目标维度以及目标度量在目标cube模型中快速查询数据,减少了数据查询的耗时,提升了查询效率,能够更好的满足实际的使用需求。

附图说明

为了更清楚地说明本申请实施例中的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍。

图1为本申请实施例提供的一种数据查询方法的流程示意图;

图2为本申请实施例提供的一种数据查询装置的结构示意图;

图3为本申请实施例提供的一种电子设备的结构示意图。

具体实施方式

下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本申请,而不能解释为对本发明的限制。

本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。

为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。

下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。

图1示出了本申请实施例提供的一种数据查询方法的流程示意图,如图1所示,该方法主要可以包括:

步骤s110:当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;

步骤s120:当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。

本申请实施例提供的大数据平台,可以预先将数据构建为cube模型,用户可以通过构建的cube模型实现快速的数据查询。

本申请实施例中,可以针对不同的业务领域分别构建cube模型,用户在请求某业务领域的数据时,可以先请求该业务领域对应的cube模型,即目标cube模型。

在实际使用中,可以通过设置不同的业务id对不同的业务领域的cube模型进行区分,模型获取请求可以携带有cube模型的业务id。

本申请实施例中,在获取到目标cube模型后,用户可以发起数据查询请求,通过数据查询请求中携带的目标维度以及目标度量,能够在目标cube模型中快速查询目标数据。

本申请实施例提供的方法,当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。本方案中,由于将数据构建为cube模型并进行存储,在查询数据时,能够通过获取目标cube模型,并基于目标维度以及目标度量在目标cube模型中快速查询数据,减少了数据查询的耗时,提升了查询效率,能够更好的满足实际的使用需求。

本申请实施例的一种可选方式中,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据,包括:

基于目标维度以及目标度量生成查询指令;

通过查询指令在存储有目标cube模型的hbase数据库中查询目标数据。

本申请实施例中,cube模型可以被存储于hbase数据库中,hbase数据库中的行键(rowkey)可以由各维度的值拼接而成,度量会保存在列族(columnfamily)中。为了减少存储代价,可以对维度和度量进行编码。在通过查询指令查询目标数据时,利用hbase列存储的特性可以保证快速响应和高并发需求。

本申请实施例的一种可选方式中,通过以下方式创建cube模型:

基于指定维度与指定度量,对源数据进行cube预计算构建cube模型。

本申请实施例中,可以通过指定维度与指定度量进行cube预计算。

作为一个示例,可以在hive中准备待分析的源数据,然后在kylin中将数据字段划分为指定维度与指定度量,并利用molap操作对数据进行cube预计算,从而构建cube模型,并将构建出的cube存储在hbase中。

本申请实施例的一种可选方式中,上述方法还包括:

确定用户选择的交互图表;

基于交互图表对目标数据进行展示。

本申请实施例中,当用户需要对查询到的目标数据进行分析时,可以选择用于展示分析记过的交互图表。实际使用中可以提供多种交互图表以供用户选择。

本申请实施例的一种可选方式中,上述方法还包括:

向终端设备发送目标cube模型的维度以及度量,以使终端设备向用户展示目标cube模型的维度以及度量,并基于用户选取的目标维度以及目标度量生成数据查询请求。

本申请实施例中,可以向终端设备目标cube模型的所有维度以及所有与度量,可以在用户选择目标维度以及目标度量时向用户展示目标cube模型的维度以及度量,以供用户选择。

在实际使用中,可以在终端设备的屏幕中指定预设区域,并在预设区域之外显示目标cube模型的维度以及度量,用户可以通过拖拽目标维度以及目标度量进入预设区域,实现对目标维度以及目标度量的选择。

传统的交互式数据分析平台虽然提供对数据灵活操作,但是需要用户自定义数据源,并完成数据关联,这就需要用户具有一定的数据分析基础,对图表的展示选择具备一定的了解,存在一定的使用门槛。而基于本方案,用户只需要按照需求选择业务领域对应的cube模型,并且选择目标维度以及目标度量,就可实现数据分析,降低了用户的使用门槛。

本申请实施例中,可以采用echarts技术,echarts提供多种可视化图表供用户使用,包括柱状图,条形图,指标卡,多维表格,饼图,漏斗图,地图等。从而可以从不同角度展示数据,帮助用户发掘数据价值。

在实际上使用中,可以根据用户选择的目标维度与目标度量的种类和个数,自动推荐合适的交互图表类型,如可以将适用的交互图表高亮显示,不适用的交互图表灰度显示。通过对交互图表的智能推荐,能够进一步降低用户的使用门槛。

本申请实施例的一种可选方式中,上述方法还包括:

获取用户提交的过滤条件;

基于条件对目标数据进行过滤。

本申请实施例,用户还可以设置过滤条件对根据数据查询请求查询出的数据进行过滤,将过滤后的数据确定为目标数据。

基于与图1中所示的方法相同的原理,图2示出了本申请实施例提供的一种数据查询装置的结构示意图,如图2所示,该数据查询装置20可以包括:

模型获取模块210,用于在接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;

数据查询模块220,用于在接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。

本申请实施例提供的装置,当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。本方案中,由于将数据构建为cube模型并进行存储,在查询数据时,能够通过获取目标cube模型,并基于目标维度以及目标度量在目标cube模型中快速查询数据,减少了数据查询的耗时,提升了查询效率,能够更好的满足实际的使用需求。

可选地,数据查询模块在基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据时,具体用于:

基于数据查询请求中携带的目标维度以及目标度量生成查询指令;

通过查询指令在存储有目标cube模型的hbase数据库中查询目标数据。

可选地,通过以下方式创建cube模型:

基于指定维度与指定度量,对源数据进行cube预计算构建cube模型。

可选地,上述装置还包括图表选择模块,图表选择模块用于:

确定用户选择的交互图表;

基于交互图表对目标数据进行展示。

可选地,上述装置还包括模型信息发送模块,模型信息发送模块用于:

向终端设备发送目标cube模型的维度以及度量,以使终端设备向用户展示目标cube模型的维度以及度量,并基于用户选取的目标维度以及目标度量生成数据查询请求。

可选地,上述装置还包括数据过滤模块,数据过滤模块用于:

获取用户提交的过滤条件;

基于条件对目标数据进行过滤。

可以理解的是,本实施例中的数据查询装置的上述各模块具有实现图1中所示的实施例中的数据查询方法相应步骤的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。上述模块可以是软件和/或硬件,上述各模块可以单独实现,也可以多个模块集成实现。对于上述数据查询装置的各模块的功能描述具体可以参见图1中所示实施例中的数据查询方法的对应描述,在此不再赘述。

本申请实施例提供了一种电子设备,包括处理器和存储器;

存储器,用于存储操作指令;

处理器,用于通过调用操作指令,执行本申请任一实施方式中所提供的数据查询方法。

作为一个示例,图3示出了本申请实施例所适用的一种电子设备的结构示意图,如图3所示,该电子设备2000包括:处理器2001和存储器2003。其中,处理器2001和存储器2003相连,如通过总线2002相连。可选的,电子设备2000还可以包括收发器2004。需要说明的是,实际应用中收发器2004不限于一个,该电子设备2000的结构并不构成对本申请实施例的限定。

其中,处理器2001应用于本申请实施例中,用于实现上述方法实施例所示的方法。收发器2004可以包括接收机和发射机,收发器2004应用于本申请实施例中,用于执行时实现本申请实施例的电子设备与其他设备通信的功能。

处理器2001可以是cpu(centralprocessingunit,中央处理器),通用处理器,dsp(digitalsignalprocessor,数据信号处理器),asic(applicationspecificintegratedcircuit,专用集成电路),fpga(fieldprogrammablegatearray,现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器2001也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,dsp和微处理器的组合等。

总线2002可包括一通路,在上述组件之间传送信息。总线2002可以是pci(peripheralcomponentinterconnect,外设部件互连标准)总线或eisa(extendedindustrystandardarchitecture,扩展工业标准结构)总线等。总线2002可以分为地址总线、数据总线、控制总线等。为便于表示,图3中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。

存储器2003可以是rom(readonlymemory,只读存储器)或可存储静态信息和指令的其他类型的静态存储设备,ram(randomaccessmemory,随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备,也可以是eeprom(electricallyerasableprogrammablereadonlymemory,电可擦可编程只读存储器)、cd-rom(compactdiscreadonlymemory,只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。

可选的,存储器2003用于存储执行本申请方案的应用程序代码,并由处理器2001来控制执行。处理器2001用于执行存储器2003中存储的应用程序代码,以实现本申请任一实施方式中所提供的数据查询方法。

本申请实施例提供的电子设备,适用于上述方法任一实施例,在此不再赘述。

本申请实施例提供了一种电子设备,与现有技术相比,当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。基于本方案,由于将数据构建为cube模型并进行存储,在查询数据时,能够通过获取目标cube模型,并基于目标维度以及目标度量在目标cube模型中快速查询数据,减少了数据查询的耗时,提升了查询效率,能够更好的满足实际的使用需求。

本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述方法实施例所示的数据查询方法。

本申请实施例提供的计算机可读存储介质,适用于上述方法任一实施例,在此不再赘述。

本申请实施例提供了一种计算机可读存储介质,与现有技术相比,当接收到用户的模型获取请求时,在预置的cube模型中确定模型获取请求对应的目标cube模型;当接收到用户的数据查询请求时,基于数据查询请求中携带的目标维度以及目标度量,在目标cube模型中查询目标数据。基于本方案,由于将数据构建为cube模型并进行存储,在查询数据时,能够通过获取目标cube模型,并基于目标维度以及目标度量在目标cube模型中快速查询数据,减少了数据查询的耗时,提升了查询效率,能够更好的满足实际的使用需求。

应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

以上仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1