一种数据统计方法、装置、电子设备和存储介质与流程

文档序号:38026953发布日期:2024-05-17 13:02阅读:14来源:国知局
一种数据统计方法、装置、电子设备和存储介质与流程

所属的技术人员能够理解,本技术的各个方面可以实现为系统、方法或程序产品。因此,本技术的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。与上述方法实施例基于同一发明构思,本技术实施例中还提供了一种电子设备。在一种实施例中,该电子设备可以是服务器,如图1所示的服务器120,以及数据库服务器130。在该实施例中,电子设备的结构可以如图14所示,包括存储器1401,通讯模块1403以及一个或多个处理器1402。存储器1401,用于存储处理器1402执行的计算机程序。存储器1401可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统,以及运行即时通讯功能所需的程序等;存储数据区可存储各种即时通讯信息和操作指令集等。存储器1401可以是易失性存储器(volatile memory),例如随机存取存储器(random-access memory,ram);存储器1401也可以是非易失性存储器(non-volatilememory),例如只读存储器,快闪存储器(flash memory),硬盘(hard disk drive,hdd)或固态硬盘(solid-state drive,ssd);或者存储器1401是能够用于携带或存储具有指令或数据结构形式的期望的计算机程序并能够由计算机存取的任何其他介质,但不限于此。存储器1401可以是上述存储器的组合。处理器1402,可以包括一个或多个中央处理单元(central processing unit,cpu)或者为数字处理单元等等。处理器1402,用于调用存储器1401中存储的计算机程序时实现上述数据统计方法。通讯模块1403用于与终端设备和其他服务器进行通信。本技术实施例中不限定上述存储器1401、通讯模块1403和处理器1402之间的具体连接介质。本技术实施例在图14中以存储器1401和处理器1402之间通过总线1404连接,总线1404在图14中以粗线描述,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。总线1404可以分为地址总线、数据总线、控制总线等。为便于描述,图14中仅用一条粗线描述,但并不描述仅有一根总线或一种类型的总线。存储器1401中存储有计算机存储介质,计算机存储介质中存储有计算机可执行指令,计算机可执行指令用于实现本技术实施例的数据统计方法。处理器1402用于执行上述的数据统计方法,如图4所示。在另一种实施例中,电子设备也可以是其他电子设备,如图1所示的终端设备110。在该实施例中,电子设备的结构可以如图15所示,包括:通信组件1510、存储器1520、显示单元1530、摄像头1540、传感器1550、音频电路1560、蓝牙模块1570、处理器1580等部件。通信组件1510用于与服务器进行通信。在一些实施例中,可以包括电路无线保真(wireless fidelity,wifi)模块,wifi模块属于短距离无线传输技术,电子设备通过wifi模块可以帮助用户收发信息。存储器1520可用于存储软件程序及数据。处理器1580通过运行存储在存储器1520的软件程序或数据,从而执行终端设备110的各种功能以及数据处理。存储器1520可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器1520存储有使得终端设备110能运行的操作系统。本技术中存储器1520可以存储操作系统及各种应用程序,还可以存储执行本技术实施例数据统计方法的计算机程序。显示单元1530还可用于显示由用户输入的信息或提供给用户的信息以及终端设备110的各种菜单的图形用户界面(graphical user interface,gui)。具体地,显示单元1530可以包括设置在终端设备110正面的显示屏1532。其中,显示屏1532可以采用液晶显示器、发光二极管等形式来配置。显示单元1530还可用于接收输入的数字或字符信息,产生与终端设备110的用户设置以及功能控制有关的信号输入,具体地,显示单元1530可以包括设置在终端设备110正面的触控屏1531,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。其中,触控屏1531可以覆盖在显示屏1532之上,也可以将触控屏1531与显示屏1532集成而实现终端设备110的输入和输出功能,集成后可以简称触摸显示屏。本技术中显示单元1530可以显示应用程序以及对应的操作步骤。摄像头1540可用于捕获静态图像,用户可以将摄像头1540拍摄的图像通过应用发布。摄像头1540可以是一个,也可以是多个。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器1580转换成数字图像信号。终端设备还可以包括至少一种传感器1550,比如加速度传感器1551、距离传感器1552、指纹传感器1553、温度传感器1554。终端设备还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。音频电路1560、扬声器1561、传声器1562可提供用户与终端设备110之间的音频接口。音频电路1560可将接收到的音频数据转换后的电信号,传输到扬声器1561,由扬声器1561转换为声音信号输出。终端设备110还可配置音量按钮,用于调节声音信号的音量。另一方面,传声器1562将收集的声音信号转换为电信号,由音频电路1560接收后转换为音频数据,再将音频数据输出至通信组件1510以发送给比如另一终端设备110,或者将音频数据输出至存储器1520以便进一步处理。蓝牙模块1570用于通过蓝牙协议来与其他具有蓝牙模块的蓝牙设备进行信息交互。例如,终端设备可以通过蓝牙模块1570与同样具备蓝牙模块的可穿戴电子设备(例如智能手表)建立蓝牙连接,从而进行数据交互。处理器1580是终端设备的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器1520内的软件程序,以及调用存储在存储器1520内的数据,执行终端设备的各种功能和处理数据。在一些实施例中,处理器1580可包括一个或多个处理单元;处理器1580还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器1580中。本技术中处理器1580可以运行操作系统、应用程序、用户界面显示及触控响应,以及本技术实施例的数据统计方法。另外,处理器1580与显示单元1530耦接。在一些可能的实施方式中,本技术提供的数据统计方法的各个方面还可以实现为一种程序产品的形式,其包括计算机程序,当程序产品在电子设备上运行时,计算机程序用于使电子设备执行本说明书上述描述的根据本技术各种示例性实施方式的数据统计方法中的步骤,例如,电子设备可以执行如图4中所示的步骤。程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。本领域内的技术人员应明白,本技术的实施例可提供为方法、系统、或计算机程序产品。因此,本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。本技术是参照根据本技术的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。显然,本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样,倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内,则本技术也意图包含这些改动和变型在内。


背景技术:

1、数据可视化分析平台是一种用于展示和解读数据的工具,其可以根据不同的数据类型和分析目的,将数据库中各类数据的分布通过图表等可视化的方式进行展示,使得数据更为直观,从而帮助对象对比数据之间的关系和规律,更好地理解数据、挖掘数据。

2、当前,数据可视化平台在对数据进行处理之前,首先需要构建数据源,并在数据源基础上构建数据集,之后选择可视化图表绑定对应的数据集,实现数据集的可视化,但一个数据集只能在一个数据库中抓取数据,如果需要跨库查询,如多个业务库数据汇总关联时,只能通过建立不同数据源,进一步基于这些数据源再构建不同的数据集来实现,最终导致数据集数据分散,数据维护困难。

3、综上,如何简化跨库数据统计过程是亟待解决的。


技术实现思路

1、本技术实施例提供一种数据统计方法、装置、电子设备和存储介质,用以简化跨库数据统计过程。

2、本技术实施例提供的一种数据统计方法,包括:

3、响应于数据源的构建操作与伪查询语句的输入操作,获取所述伪查询语句包含多个数据源标识,所述伪查询语句基于预设语言规则编写得到;

4、基于数据源标识与数据库存储信息的预设映射关系,确定所述多个数据源标识各自对应的数据库存储信息;

5、若基于确定的各数据库存储信息,确定所述多个数据源标识对应的目标数据库属于跨库跨服务器,则在所述目标数据库之间创建连接通道;以及,基于各目标数据库的数据库名称,将所述伪查询语句转换为数据统计平台能够识别的真实查询语句;

6、基于所述连接通道与所述真实查询语句,获取所述各目标数据库中的目标数据后,在所述多个数据源中确定一个目标数据源,并基于所述目标数据在所述目标数据源下创建数据集,以对所述数据集中的数据进行统计。

7、本技术实施例提供的一种数据统计装置,包括:

8、响应单元,用于响应于数据源的构建操作与伪查询语句的输入操作,获取所述伪查询语句包含多个数据源标识,所述伪查询语句基于预设语言规则编写得到;

9、第一确定单元,用于基于数据源标识与数据库存储信息的预设映射关系,确定所述多个数据源标识各自对应的数据库存储信息;

10、第二确定单元,用于若基于确定的各数据库存储信息,确定所述多个数据源标识对应的目标数据库属于跨库跨服务器,则在所述目标数据库之间创建连接通道;以及,基于各目标数据库的数据库名称,将所述伪查询语句转换为数据统计平台能够识别的真实查询语句;

11、创建单元,用于基于所述连接通道与所述真实查询语句,获取所述各目标数据库中的目标数据后,在所述多个数据源中确定一个目标数据源,并基于所述目标数据在所述目标数据源下创建数据集,以对所述数据集中的数据进行统计。

12、可选的,所述数据库存储信息包含相应数据库所在的服务器地址、数据库名称与端口;所述第二确定单元单元具体用于:

13、基于所述各目标数据库各自对应的服务器地址不相同,确定所述多个数据源标识对应的目标数据库属于跨服务器;

14、基于所述各目标数据库各自对应的服务器地址、数据库名称与端口中有至少一个不相同,确定所述多个数据源标识对应的目标数据库属于跨库。

15、可选的,所述第二确定单元具体用于:

16、在所述各目标数据库中选取一个源目标数据库,并基于所述各目标数据库的数据库类型,创建所述源目标数据库与其他目标数据库之间的数据库连接通道;

17、其中,所述源目标数据库是在所述各目标数据库中随机选取,或基于针对所述各目标数据库的数据获取需求量选取的。

18、可选的,所述第二确定单元具体用于:

19、若所述各目标数据库的数据库类型均为第一目标类型,则基于第一预设规则,以及所述其他目标数据库的路径,在所述源目标数据库中创建与所述其他目标数据库中的目标数据表各自对应的虚拟表,以将源目标数据库与所述其他目标数据库连接;

20、若所述各目标数据库的数据库类型均为第二目标类型,则基于第二预设规则,以及所述其他目标数据库的数据库名称,在所述源目标数据库中创建与所述其他目标数据库中的目标数据表各自对应的数据库链接dblink,以将源目标数据库与所述其他目标数据库连接。

21、可选的,所述第二确定单元具体用于:

22、若所述各目标数据库的数据库类型均为第一目标类型,则基于源目标数据库名称与虚拟表名称,对所述伪查询语句中的多个数据源标识及目标数据表名称进行替换,得到数据统计平台能够识别的真实查询语句;

23、若所述各目标数据库的数据库类型均为第二目标类型,则基于相应的目标数据库名称,对所述伪查询语句中的多个数据源标识进行替换,得到数据统计平台能够识别的真实查询语句。

24、可选的,所述创建单元具体用于:

25、基于所述数据库连接通道与所述真实查询语句,在所述源目标数据库中获取所述源目标数据库与所述其他目标数据库中的目标数据。

26、可选的,所述装置还包括:

27、第三确定单元,用于若基于确定的各数据库存储信息,确定所述多个数据源标识对应的目标数据库属于同服务器跨库,且所述各目标数据库的数据库类型均为第一目标类型,则基于所述目标数据库的数据库名称,将所述伪查询语句转换为数据统计平台能够识别的真实查询语句;并基于所述真实查询语句,获取所述目标数据库中的目标数据后,基于所述目标数据在所述目标数据源下创建数据集,以对所述数据集中的数据进行统计;

28、若基于确定的各数据库存储信息,确定所述多个数据源标识对应的目标数据库属于同服务器跨库,且所述各目标数据库的数据库类型均为第二目标类型,则创建所述源目标数据库与其他目标数据库之间的数据库连接通道,并基于所述目标数据库的数据库名称,将所述伪查询语句转换为数据统计平台能够识别的真实查询语句;以及基于所述真实查询语句,获取所述目标数据库中的目标数据后,基于所述目标数据在所述目标数据源下创建数据集,以对所述数据集中的数据进行统计。

29、本技术实施例提供的一种电子设备,包括处理器和存储器,其中,所述存储器存储有计算机程序,当所述计算机程序被所述处理器执行时,使得所述处理器执行上述任意一种数据统计方法的步骤。

30、本技术实施例提供一种计算机可读存储介质,其包括计算机程序,当所述计算机程序在电子设备上运行时,所述计算机程序用于使所述电子设备执行上述任意一种数据统计方法的步骤。

31、本技术实施例提供一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序存储在计算机可读存储介质中;当电子设备的处理器从计算机可读存储介质读取所述计算机程序时,所述处理器执行所述计算机程序,使得所述电子设备执行上述任意一种数据统计方法的步骤。

32、本技术有益效果如下:

33、本技术实施例提供了一种数据统计方法、装置、电子设备和存储介质,由于本技术提出了一种伪查询语言,可以对伪查询语言解析得到所需要查询到数据源标识,根据数据源标识所对应的数据库存储信息,以此确定要访问的数据库是否为跨库跨服务器,对于跨库跨服务器的情况,通过创建各数据库之间的连接通道,以实现访问一个数据库即可通过连接通道进而访问其他数据库的目的,该情况下只需要在一个数据源下创建一个数据集,即可获取全部所需要的数据,无需再根据数据库数量创建多个数据集,数据统计简便,方便维护管理。

34、本技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本技术而了解。本技术的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1