数据查询装置及方法与流程

文档序号:11155183阅读:313来源:国知局
数据查询装置及方法与制造工艺

本发明涉及数据处理技术领域,尤其涉及一种数据查询装置及方法。



背景技术:

目前,随着计算机的发展和网络应用的日益广泛,以及不同领域的业务种类的日益丰富,各种类型的数据越来越多,相应的对数据查询要求也越来越严格。

目前,对数据的查询,一般都是对包含海量数据的数据库总表进行遍历查询,通过输入查询条件,进行统计排序查询等等,在数据量非常大的情况下,对总表的数据进行遍历查询,所消耗的时间较长,导致数据查询的效率非常低。



技术实现要素:

本发明的主要目的在于提出一种数据查询装置及方法,旨在解决现有的数据查询方式,对数据查询的效率非常低的技术问题。

为实现上述目的,本发明提供的一种数据查询装置,所述数据查询装置包括:

获取模块,用于在接收到数据查询条件时,获取所述数据查询条件对应的查询日期;

定位模块,用于定位所述查询日期对应的分表;

确定模块,用于在定位的所述分表中,确定当前符合数据查询条件的数据条数;

分页模块,用于根据预设的分页规则对确定条数的数据进行分页;

显示模块,用于在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据。

可选地,所述数据查询装置还包括:

分表模块,用于按照预设的时间周期将数据库中的数据进行分表操作;

所述确定模块,还用于确定各个分表的标识信息以及起始终止时间点;

记录模块,用于在预设的索引表记录各个分表的标识信息以及起始终止时间点。

可选地,在定位的所述分表包括多个分表时,所述确定模块包括:

建立单元,用于建立各个所述分表所对应的数据映射关系数组;

确定单元,用于启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数。

可选地,所述数据查询装置还包括:

缓存模块,用于若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,则缓存所述分页标识对应的数据,以便提取缓存的所述数据进行显示。

可选地,在数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此对确定条数的数据进行分页得到的页数也是动态更新的。

此外,为实现上述目的,本发明还提出一种数据查询方法,所述数据查询方法包括:

在接收到数据查询条件时,获取所述数据查询条件对应的查询日期;

定位所述查询日期对应的分表;

在定位的所述分表中,确定当前符合数据查询条件的数据条数;

根据预设的分页规则对确定条数的数据进行分页;

在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据。

可选地,所述在接收到数据查询条件时,获取所述数据查询条件对应的查询日期的步骤之前,所述数据查询方法还包括:

按照预设的时间周期将数据库中的数据进行分表操作;

确定各个分表的标识信息以及起始终止时间点;

在预设的索引表记录各个分表的标识信息以及起始终止时间点。

可选地,在定位的所述分表包括多个分表时,所述在定位的所述分表中,确定当前符合数据查询条件的数据条数的步骤包括:

建立各个所述分表所对应的数据映射关系数组;

启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数。

可选地,所述显示所述分页标识对应的数据的之前,若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,则缓存所述分页标识对应的数据,以便提取缓存的所述数据进行显示。

可选地,在数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此对确定条数的数据进行分页得到的页数也是动态更新的。

本发明提出的数据查询装置及方法,在接收到数据查询条件时,先获取所述数据查询条件对应的查询日期,然后定位所述查询日期对应的分表,在定位的所述分表中,确定当前符合数据查询条件的数据条数,并根据预设的分页规则对确定条数的数据进行分页,最终在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据,实现了查询数据时,先根据查询日期定位出对应的分表,然后在分表中进一步确定符合数据查询条件的数据条数,并对确定条数的数据进行分页查询,避免了在整个数据库中遍历所有数据进行查询,从而提高了数据查询的效率。

附图说明

图1为实现本发明各个实施例一个可选地终端的硬件结构示意图;

图2为如图1所示的终端的无线通信装置示意图;

图3为本发明数据查询装置第一实施例的模块示意图;

图4为本发明数据查询装置第二实施例的模块示意图;

图5为图3中确定模块的细化模块示意图;

图6为本发明分页显示数据较佳实施场景示意图;

图7为本发明较佳实施场景示意图;

图8为本发明数据查询方法第一实施例的流程示意图;

图9为本发明数据查询方法第二实施例的流程示意图;

图10为本发明在定位的所述分表中,确定当前符合数据查询条件的数据条数的细化流程示意图。

本发明目的的实现、功能特点及优点将结合实施例,参照附图做说明。

具体实施方式

应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。

现在将参考附图描述实现本发明各个实施例的终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。

终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定类型的终端。

图1为实现本发明各个实施例的一个可选地终端的硬件结构示意图。

终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述终端的元件。

无线通信单元110通常包括一个或多个组件,其允许终端100与无线通信装置或网络之间的无线电通信。例如,无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。

广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且,广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供,并且在该情况下,广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在,例如,其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播装置接收信号广播。特别地,广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H),前向链路媒体(MediaFLO@)的数据广播装置、地面数字广播综合服务(ISDB-T)等等的数字广播装置接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播装置以及上述数字广播装置。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器160(或者其它类型的存储介质)中。

移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。

无线互联网模块113支持终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。

短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。

位置信息模块115是用于检查或获取终端的位置信息的模块。位置信息模块的典型示例是GPS(全球定位装置)。根据当前的技术,GPS模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法,从而根据经度、纬度和高度准确地计算三维当前位置信息。当前,用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外,GPS模块115能够通过实时地连续计算当前位置信息来计算速度信息。

A/V输入单元120用于接收音频或视频信号。

用户输入单元130可以根据用户输入的命令生成键输入数据以控制终端的各种操作。用户输入单元130允许用户输入各种类型的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。

感测单元140检测终端100的当前状态,(例如,终端100的打开或关闭状态)、终端100的位置、用户对于终端100的接触(即,触摸输入)的有无、终端100的取向、终端100的加速或将速移动和方向等等,并且生成用于控制终端100的操作的命令或信号。例如,当终端100实施为滑动型移动电话时,感测单元140可以感测该滑动型电话是打开还是关闭。另外,感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。

接口单元170用作至少一个外部装置与终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到终端100内的一个或多个元件或者可以用于在终端和外部装置之间传输数据。

另外,当终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到终端的路径。从底座输入的各种命令信号或电力可以用作用于识别终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151。

显示单元151可以显示在终端100中处理的信息。例如,当终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。

同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式,终端100可以包括两个或更多显示单元(或其它显示装置),例如,终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。

存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。

存储器160可以包括至少一种类型的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。

控制器180通常控制终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181,多媒体模块181可以构造在控制器180内,或者可以构造为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图片绘制输入识别为字符或图像。

电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。

这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。

至此,己经按照其功能描述了终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型终端等等的各种类型的终端中的滑动型终端作为示例。因此,本发明能够应用于任何类型的终端,并且不限于滑动型终端。

如图1中所示的终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信装置以及基于卫星的通信装置来操作。

现在将参考图2描述其中根据本发明的终端能够操作的通信装置。

这样的通信装置可以使用不同的空中接口和/或物理层。例如,由通信装置使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信装置(UMTS)(特别地,长期演进(LTE))、全球移动通信装置(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信装置,但是这样的教导同样适用于其它类型的装置。

参考图2,CDMA无线通信装置可以包括多个终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的装置可以包括多个BSC2750。

每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。

分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子装置(BTS)或者其它等效术语。在这样的情况下,术语"基站"可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为"蜂窝站"。或者,特定BS270的各分区可以被称为多个蜂窝站。

如图2中所示,广播发射器(BT)295将广播信号发送给在装置内操作的终端100。如图1中所示的广播接收模块111被设置在终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位装置(GPS)卫星300。卫星300帮助定位多个终端100中的至少一个。

在图2中,描绘了多个卫星300,但是可以理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星300配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪终端的位置的其它技术。另外,至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。

作为无线通信装置的一个典型操作,BS270接收来自各种终端100的反向链路信号。终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到终端100。

本发明旨在提供一种基于日期分表策略的数据分页查询解决方案,主要应用场景为业务日志、用户操作日志等海量数据的查询。具体地,先对包含海量数据的数据库记录总表进行分表(即将记录总表按照设定的规则切分成一组子表,每个子表反映该记录总表的一部分),并随后针对各个分表进行分页查询,提高了数据查询的效率。

目前,对数据的查询,一般都是直接在总表中,进行数据的统计、分页和排序,性能低下,对数据库和服务器都造成巨大的压力;而且,在一个总表中一次性查询数据,由于查询时间过长并且结果数据过大,容易造成内存溢出,服务器僵尸。

基于上述终端硬件结构、通信装置的结构,以及现有技术存在的问题,提出本发明图表数据的显示装置的各个实施例。

本发明中的所述数据查询装置可以为终端,如台式电脑、PC侧等等,可可以为服务器,本实施例中,优选应用在上述的终端中。

参照图3,图3为本发明数据查询装置第一实施例的模块示意图。

需要强调的是,对本领域的技术人员来说,图3所示模块图仅仅是一个较佳实施例的示例图,本领域的技术人员围绕图3所示的数据查询装置的模块,可轻易进行新的模块的补充;各模块的名称是自定义名称,仅用于辅助理解该数据查询装置的各个程序功能块,不用于限定本发明的技术方案,本发明技术方案的核心是,各自定义名称的模块所要达成的功能。

在本实施例中,所述数据查询装置包括:

获取模块10,用于在接收到数据查询条件时,获取所述数据查询条件对应的查询日期;

在本实施例中,在接收到数据查询条件时,获取模块10先获取所述数据查询条件对应的查询日期,所述查询日期表示具体的日子和时间,当输入的查询日期仅包括日子,如2008-8-8,那么,所述查询日期就表示从2008-8-8的00:00:01到23:59:59;若是输入的查询日期包括具体的时间,如2008-8-8的08:00:00到18:00:00,那么,所述查询日期就表示该具体的时间。应当理解的是,所述查询条件中不仅包括查询日期,还可以包括其它参数,如数据类型,数据容量等等参数。

定位模块20,用于定位所述查询日期对应的分表;

在获取模块10获取到所述数据查询条件对应的查询日期时,定位模块20根据所述查询日期从数据库中定位到所述查询日期对应的分表,此处值得说明的是,本发明中事先对数据库中的数据进行分表,具体在获取模块10获取所述数据查询条件对应的查询日期之前,包括两种实施方式:

1)方式一、按照预设的时间周期将数据库中的数据进行分表操作。

也就是说,先按照预设的时间周期如一天或者一周,对数据库中的所有数据进行划分,以将总的数据表分成多个分表,其中,每一个分表在创建时都设置有一个标识信息,在创建完成时,即可将数据库中的数据分配到相应的分表中。后续,在获取到查询日期时,定位模块20即可根据所述查询日期定位到对应的分表中。

2)方式二、按照预设的时间周期将数据库中的数据进行分表操作;确定各个分表的标识信息以及起始终止时间点;在预设的索引表记录各个分表的标识信息以及起始终止时间点。

该实施方式在第二实施例中详述。

确定模块30,用于在定位的所述分表中,确定当前符合数据查询条件的数据条数;

在本实施例中,确定模块30在定位的所述分表中,确定当前符合数据查询条件的数据条数,由于上述内容已经提到,所述查询条件可能还包括数据类型,数据容量,因此,根据所述查询条件,即可在定位的分表中确定当前符合数据查询条件的数据条数。此处应当理解的是,数据查询过程中,是按照一定的顺序对数据进行遍历的,因此,在根据查询条件对定位的分表进行查询的情况下,分表中符合查询条件的数据条数是呈增加趋势的,也就是说,符合查询条件的数据条数在数据查询过程中,是逐渐变多的,直到各个分表中符合查询条件的数据已经遍历完成才保持不变。

分页模块40,用于根据预设的分页规则对确定条数的数据进行分页;

显示模块50,用于在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据。

虽然数据在分表的查询遍历过程中,数据条数在更新,但是在确定当前符合数据查询条件的数据条数的情况下,分页模块40可以先根据预设的分页规则对已经确定条数的数据进行分页,例如,已经遍历出20条数据了,若预设的分页规则就是设定20条数据划分为一页,那么在确定出20条数据时,分页模块40此时即可将该20条数据划分到一页中,后续再遍历出20条数据,继续划分为另一页。

当然,在根据所述分页规则对确定条数的数据进行分页之后,显示模块50即可按照顺序依次显示分页标识,如1、2、3等等。此时,若接收到基于分页标识输入的选择指令时,即可显示所述分页标识对应的数据,以完成数据的查询,应当理解的是,在接收到基于分页标识输入的选择指令时,先确定所述分页标识对应的数据,然后确定所述数据在分表中的位置,进一步地,根据所述分表中的位置,从数据库中提取相应的数据进行显示,也就是说,本实施例中,最终提取的数据是从数据库中提取的,分表和分页的作用仅仅是便于查询数据,减少了在数据库中遍历数据的操作。

本实施例提出的数据查询装置,在接收到数据查询条件时,先获取所述数据查询条件对应的查询日期,然后定位所述查询日期对应的分表,在定位的所述分表中,确定当前符合数据查询条件的数据条数,并根据预设的分页规则对确定条数的数据进行分页,最终在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据,实现了查询数据时,先根据查询日期定位出对应的分表,然后在分表中进一步确定符合数据查询条件的数据条数,并对确定条数的数据进行分页查询,避免了在整个数据库中遍历所有数据进行查询,从而提高了数据查询的效率。

进一步地,提出本发明数据查询装置的第二实施例。

数据查询装置的第二实施例与数据查询装置的第一实施例的区别在于,参照图4,所述数据查询装置还包括:

分表模块60,用于按照预设的时间周期将数据库中的数据进行分表操作;

也就是说,分表模块60先按照预设的时间周期如一天或者一周,对数据库中的所有数据进行划分,以将总的数据表分成多个分表,在本实施例中,数据库采用日期分表策略,如每1天进行分表(数据表),也可以是6小时、12小时、7天等一个分表,具体根据实际数据量级来制定每张分表时间周期,此处不做限定。

所述确定模块30,还用于确定各个分表的标识信息以及起始终止时间点;

记录模块70,用于在预设的索引表记录各个分表的标识信息以及起始终止时间点。

在对数据进行分表操作之后,创建分表的索引表(指的是所有分表的管理表),或者是获取预设的索引表,所述索引表,用来记录每张分表的标识信息以及数据的起始时间点和终止时间点等等,通过该索引表,定位模块20可以快速定位到分表,因此,在创建或者获取到所述索引表时,所述确定模块30先确定各个分表的标识信息以及起始终止时间点,然后记录模块70在所述索引表记录各个分表的标识信息以及起始终止时间点。

可以理解的是,在所述索引表记录各个分表的标识信息以及起始终止时间点之后,若接收到数据查询条件,此时所述确定模块30先确定出所述数据查询条件对应的查询日期,然后根据所述查询日期可以快速定位出各个分表,而不用到各个数据库中的各个分表中去遍历查询日期,从而提高了数据查询的效率。

进一步地,本实施例中,通过所述索引表记录各个分表的标识信息以及起始终止时间点,有效防止了后期数据量发生变更时,由于调整了分表的时间周期,而采用该索引表导致的数据查询结果不准确。因此,本实施例中,在创建索引表时,会记录各个分表的标识信息以及起始终止时间点,保证了索引表是对本次时间周期对应的分表使用的,若是采用其它时间周期划分的分表,就不同采用该索引表,从而提高了数据查询的准确性。

进一步地,在创建分表并存储数据时,会预先创建好后面几张分表(至少1张),如今天是2016.7.14,就已经创建好明天2016.7.15的分表,以此类推,预先创建好下一张分表,使得下一张分表在填写数据时,不需要花时间等待分表的创建,当然,创建分表时同时更新会索引表的分表信息,即增加新的分表的标识信息,并在新的分表中写入数据时,再根据新写入的数据记录新的分表的起始终止时间点。

在本实施例中,在查询数据之前,先根据预设的时间周期将数据库中的数据进行分表操作,并在预设的索引表记录各个分表的标识信息以及起始终止时间点,使得后续数据查询过程中,数据的查询效率和准确性都有所提高。

进一步地,提出本发明数据查询装置的第三实施例。

数据查询装置的第三实施例与数据查询装置的第一实施例的区别还在于,在定位的所述分表包括多个分表时,参照图5,所述确定模块30包括:

建立单元31,用于建立各个所述分表所对应的数据映射关系数组;

确定单元32,用于启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数。

在本实施例中,在定位的所述分表中,确定当前符合数据查询条件的数据条数,具体地,建立单元31先建立各个所述分表所对应的数据映射关系数组,然后启动预设个数的线程,所述线程的个数可根据分表的个数进行确定,包括:在分表的个数低于预设个数时,将线程的个数设置为分表的个数;在分表的个数大于或等于预设个数是,将线程的个数设置为分表的个数1/X。例如,分表的个数为5个,则可启动5个线程,例如,分表的个数为20个,此时,可以启动10线程或者是5个线程,所述预设个数根据具体情况进行设置,此处不做限定。

在启动预设个数的线程后,确定单元32通过启动的各个线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定出当前符合数据查询条件的数据条数,也就是说,本实施例中,在确定查询条件的情况下,通过启动多个线程,并行查询各个分表的数据,而不用按照顺序一个一个分表去查询数据,从而提高了数据查询的效率。

本实施例中,值得注意的是,所述数据映射关系数组具体由查询的分表对应的列表信息组成,每张分表信息内容如下:

符合查询条件的数据条数;

状态:0:未统计,1:已统计,2:重新统计(针对最新还在实时动态写入数据的分表,每次均需要重新统计,以防分表数据已变更)。

在本实施例中,值得注意的是,在数据查询过程中,会遵循首页数据查询显示原则:在查询各个分表的数据映射关系数组时,若已统计分表的查询结果数达到每页条数(如20条数据)时,可以先在首页进行数据显示。然后再继续查询其它分表的映射关系数组,直到全部统计完毕。

在本实施例中,在定位的所述分表中,先建立各个所述分表所对应的数据映射关系数组,然后启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数,有效提高了数据查询的效率。

进一步地,提出本发明数据查询装置的第四实施例。

数据查询装置的第四实施例与数据查询装置的第三实施例的区别在于:所述数据查询装置还包括:

缓存模块,用于若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,则缓存所述分页标识对应的数据,以便提取缓存的所述数据进行显示。

在本实施例中,若是指定分页查询,即接收到基于分页标识输入的选择指令时,此时,不仅显示所述分页标识对应的数据,还会根据分表的数据映射关系数组,获取所述分页标识对应的数据所在分表位置,由于前端可见分页标识,因此根据分页标识,遍历分表的数据映射关系数组,即可定位分页标识的数据所在的具体分表,然后查询具体分表的起始时间点和终止时间点,此时,若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,如少于10条数据,此时,缓存模块缓存所述分页标识对应的数据,并返回前端进行展示,使得数据查询时,若是查询到同一个分表对应的分页标识中,数据较少,可直接缓存所述分页标识对应的数据,那么在显示所述分页标识对应的数据时,直接提取缓存的所述数据进行显示即可,而不需要从数据库中去提取数据,提高了数据查询的效率,也提高了数据查询的灵活性。

进一步地,缓存具体的查询结果数据,条件为本分表的结果数据少于预设阈值时,主要是为了应对极端情况下,一页如50条数据需要跨越太多张分表查询,性能较差的情况,因此,仅在所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,才缓存所述分页标识对应的数据,从而提高了数据查询的智能性。

进一步地,提出本发明数据查询装置的第五实施例。

数据查询装置的第五实施例与数据查询装置的第一至第四实施例的区别在于:

在数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此对确定条数的数据进行分页得到的页数也是动态更新的。

由于第一实施例中已经提到,数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此,对确定条数的数据进行分页得到的页数也是动态更新的,并且更新完的各个分页标识可见及可查,用户无需等待分页数据全部加载完,可见的分页内容均为已统计,可以直接点击查询指定的分页数据。

为更好理解本实施例中,参照图6,前端展示分页信息如下:

从图6可知,最右边的数据加载中的28/164,164表示符合时间周期的各个分表,28表示当前已经遍历的分表个数,而最左边的29866条记录表示这28个分表中,符合查询条件的数据条数有29866条,这29866条数据分页得到的页数为1494页,由于当前正在进行数据查询和遍历,因此根据上述提到的首页显示原则,当前界面显示第1页的数据(图未示图第1页的具体数据),而图6的数字1-10标识当前显示1至10页的数据,并且按照每10页的间隔显示分页标识。

在本实施例中,通过边查询数据,边根据已经查询出的数据条数更新前端的分页信息,使得用户得知实时当前的数据查询情况。

为更好理解本实施例,参照图7,举例应用场景如下:

如图7所示,终端基于浏览器向服务器发送数据查询指令,若所述数据查询指令是查询首页数据,那么所述终端在浏览器中输入条件查询,以供所述服务器反馈首页数据,终端在接收到服务器反馈的首页数据时,显示接收到的首页数据;若此时终端需要更新分页情况,则获取剩余分表笔数,以供服务器查询剩余分表结果笔数,并反馈分页情况至所述终端,以供所述终端更新前端分页情况;若所述终端查询指定分页数据,则发送查询条件以及具体的分页数值至服务器,以供服务器查询指令分页数据,并反馈分页数据至所述终端,最终,由所述终端进行数据展示。

本发明还提供一种数据查询方法。

参照图8,图8为本发明数据查询方法第一实施例的流程示意图。

在本实施例中,所述数据查询方法包括:

步骤S10,在接收到数据查询条件时,获取所述数据查询条件对应的查询日期;

在本实施例中,在接收到数据查询条件时,先获取所述数据查询条件对应的查询日期,所述查询日期表示具体的日子和时间,当输入的查询日期仅包括日子,如2008-8-8,那么,所述查询日期就表示从2008-8-8的00:00:01到23:59:59;若是输入的查询日期包括具体的时间,如2008-8-8的08:00:00到18:00:00,那么,所述查询日期就表示该具体的时间。应当理解的是,所述查询条件中不仅包括查询日期,还可以包括其它参数,如数据类型,数据容量等等参数。

步骤S20,定位所述查询日期对应的分表;

在获取到所述数据查询条件对应的查询日期时,根据所述查询日期从数据库中定位到所述查询日期对应的分表,此处值得说明的是,本发明中事先对数据库中的数据进行分表,具体在步骤S10之前,包括两种实施方式:

1)方式一、按照预设的时间周期将数据库中的数据进行分表操作。

也就是说,先按照预设的时间周期如一天或者一周,对数据库中的所有数据进行划分,以将总的数据表分成多个分表,其中,每一个分表在创建时都设置有一个标识信息,在创建完成时,即可将数据库中的数据分配到相应的分表中。后续,在获取到查询日期时,即可根据所述查询日期定位到对应的分表中。

2)方式二、按照预设的时间周期将数据库中的数据进行分表操作;确定各个分表的标识信息以及起始终止时间点;在预设的索引表记录各个分表的标识信息以及起始终止时间点。

该实施方式在第二实施例中详述。

步骤S30,在定位的所述分表中,确定当前符合数据查询条件的数据条数;

在本实施例中,在定位的所述分表中,确定当前符合数据查询条件的数据条数,由于上述内容已经提到,所述查询条件可能还包括数据类型,数据容量,因此,根据所述查询条件,即可在定位的分表中确定当前符合数据查询条件的数据条数。此处应当理解的是,数据查询过程中,是按照一定的顺序对数据进行遍历的,因此,在根据查询条件对定位的分表进行查询的情况下,分表中符合查询条件的数据条数是呈增加趋势的,也就是说,符合查询条件的数据条数在数据查询过程中,是逐渐变多的,直到各个分表中符合查询条件的数据已经遍历完成才保持不变。

步骤S40,根据预设的分页规则对确定条数的数据进行分页;

步骤S50,在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据。

虽然数据在分表的查询遍历过程中,数据条数在更新,但是在确定当前符合数据查询条件的数据条数的情况下,可以先根据预设的分页规则对已经确定条数的数据进行分页,例如,已经遍历出20条数据了,若预设的分页规则就是设定20条数据划分为一页,那么在确定出20条数据时,此时即可将该20条数据划分到一页中,后续再遍历出20条数据,继续划分为另一页。

当然,在根据所述分页规则对确定条数的数据进行分页之后,即可按照顺序依次显示分页标识,如1、2、3等等。此时,若接收到基于分页标识输入的选择指令时,即可显示所述分页标识对应的数据,以完成数据的查询,应当理解的是,在接收到基于分页标识输入的选择指令时,先确定所述分页标识对应的数据,然后确定所述数据在分表中的位置,进一步地,根据所述分表中的位置,从数据库中提取相应的数据进行显示,也就是说,本实施例中,最终提取的数据是从数据库中提取的,分表和分页的作用仅仅是便于查询数据,减少了在数据库中遍历数据的操作。

本实施例提出的数据查询方法,在接收到数据查询条件时,先获取所述数据查询条件对应的查询日期,然后定位所述查询日期对应的分表,在定位的所述分表中,确定当前符合数据查询条件的数据条数,并根据预设的分页规则对确定条数的数据进行分页,最终在接收到基于分页标识输入的选择指令时,显示所述分页标识对应的数据,实现了查询数据时,先根据查询日期定位出对应的分表,然后在分表中进一步确定符合数据查询条件的数据条数,并对确定条数的数据进行分页查询,避免了在整个数据库中遍历所有数据进行查询,从而提高了数据查询的效率。

进一步地,提出本发明数据查询方法的第二实施例。

数据查询方法的第二实施例与数据查询方法的第一实施例的区别在于,参照图9,所述步骤S10之前,所述数据查询方法还包括:

步骤S60,按照预设的时间周期将数据库中的数据进行分表操作;

也就是说,先按照预设的时间周期如一天或者一周,对数据库中的所有数据进行划分,以将总的数据表分成多个分表,在本实施例中,数据库采用日期分表策略,如每1天进行分表(数据表),也可以是6小时、12小时、7天等一个分表,具体根据实际数据量级来制定每张分表时间周期,此处不做限定。

步骤S70,确定各个分表的标识信息以及起始终止时间点;

步骤S80,在预设的索引表记录各个分表的标识信息以及起始终止时间点。

在对数据进行分表操作之后,创建分表的索引表(指的是所有分表的管理表),或者是获取预设的索引表,所述索引表,用来记录每张分表的标识信息以及数据的起始时间点和终止时间点等等,通过该索引表,可以快速定位到分表,因此,在创建或者获取到所述索引表时,先确定各个分表的标识信息以及起始终止时间点,然后在所述索引表记录各个分表的标识信息以及起始终止时间点。

可以理解的是,在所述索引表记录各个分表的标识信息以及起始终止时间点之后,若接收到数据查询条件,此时先确定出所述数据查询条件对应的查询日期,然后根据所述查询日期可以快速定位出各个分表,而不用到各个数据库中的各个分表中去遍历查询日期,从而提高了数据查询的效率。

进一步地,本实施例中,通过所述索引表记录各个分表的标识信息以及起始终止时间点,有效防止了后期数据量发生变更时,由于调整了分表的时间周期,而采用该索引表导致的数据查询结果不准确。因此,本实施例中,在创建索引表时,会记录各个分表的标识信息以及起始终止时间点,保证了索引表是对本次时间周期对应的分表使用的,若是采用其它时间周期划分的分表,就不同采用该索引表,从而提高了数据查询的准确性。

进一步地,在创建分表并存储数据时,会预先创建好后面几张分表(至少1张),如今天是2016.7.14,就已经创建好明天2016.7.15的分表,以此类推,预先创建好下一张分表,使得下一张分表在填写数据时,不需要花时间等待分表的创建,当然,创建分表时同时更新会索引表的分表信息,即增加新的分表的标识信息,并在新的分表中写入数据时,再根据新写入的数据记录新的分表的起始终止时间点。

在本实施例中,在查询数据之前,先根据预设的时间周期将数据库中的数据进行分表操作,并在预设的索引表记录各个分表的标识信息以及起始终止时间点,使得后续数据查询过程中,数据的查询效率和准确性都有所提高。

进一步地,提出本发明数据查询方法的第三实施例。

数据查询方法的第三实施例与数据查询方法的第一实施例的区别还在于,在定位的所述分表包括多个分表时,参照图10,所述步骤S30包括:

步骤S31,建立各个所述分表所对应的数据映射关系数组;

步骤S32,启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数。

在本实施例中,在定位的所述分表中,确定当前符合数据查询条件的数据条数,具体地,先建立各个所述分表所对应的数据映射关系数组,然后启动预设个数的线程,所述线程的个数可根据分表的个数进行确定,包括:在分表的个数低于预设个数时,将线程的个数设置为分表的个数;在分表的个数大于或等于预设个数是,将线程的个数设置为分表的个数1/X。例如,分表的个数为5个,则可启动5个线程,例如,分表的个数为20个,此时,可以启动10线程或者是5个线程,所述预设个数根据具体情况进行设置,此处不做限定。

在启动预设个数的线程后,通过启动的各个线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定出当前符合数据查询条件的数据条数,也就是说,本实施例中,在确定查询条件的情况下,通过启动多个线程,并行查询各个分表的数据,而不用按照顺序一个一个分表去查询数据,从而提高了数据查询的效率。

本实施例中,值得注意的是,所述数据映射关系数组具体由查询的分表对应的列表信息组成,每张分表信息内容如下:

符合查询条件的数据条数;

状态:0:未统计,1:已统计,2:重新统计(针对最新还在实时动态写入数据的分表,每次均需要重新统计,以防分表数据已变更)。

在本实施例中,值得注意的是,在数据查询过程中,会遵循首页数据查询显示原则:在查询各个分表的数据映射关系数组时,若已统计分表的查询结果数达到每页条数(如20条数据)时,可以先在首页进行数据显示。然后再继续查询其它分表的映射关系数组,直到全部统计完毕。

在本实施例中,在定位的所述分表中,先建立各个所述分表所对应的数据映射关系数组,然后启动预设个数的线程并行查询所述数据映射关系数组中各个所述分表的数据,以确定当前符合数据查询条件的数据条数,有效提高了数据查询的效率。

进一步地,提出本发明数据查询方法的第四实施例。

数据查询方法的第四实施例与数据查询方法的第三实施例的区别在于:

在本实施例中,所述显示所述分页标识对应的数据的之前,若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,则缓存所述分页标识对应的数据,以便提取缓存的所述数据进行显示。

在本实施例中,若是指定分页查询,即接收到基于分页标识输入的选择指令时,此时,不仅显示所述分页标识对应的数据,还会根据分表的数据映射关系数组,获取所述分页标识对应的数据所在分表位置,由于前端可见分页标识,因此根据分页标识,遍历分表的数据映射关系数组,即可定位分页标识的数据所在的具体分表,然后查询具体分表的起始时间点和终止时间点,此时,若检测到所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,如少于10条数据,此时,缓存所述分页标识对应的数据,并返回前端进行展示,使得数据查询时,若是查询到同一个分表对应的分页标识中,数据较少,可直接缓存所述分页标识对应的数据,那么在显示所述分页标识对应的数据时,直接提取缓存的所述数据进行显示即可,而不需要从数据库中去提取数据,提高了数据查询的效率,也提高了数据查询的灵活性。

进一步地,缓存具体的查询结果数据,条件为本分表的结果数据少于预设阈值时,主要是为了应对极端情况下,一页如50条数据需要跨越太多张分表查询,性能较差的情况,因此,仅在所述分页标识对应的数据在同一个分表中的数据数量少于预设阈值,才缓存所述分页标识对应的数据,从而提高了数据查询的智能性。

进一步地,提出本发明数据查询方法的第五实施例。

数据查询方法的第五实施例与数据查询方法的第一至第四实施例的区别在于:

在数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此对确定条数的数据进行分页得到的页数也是动态更新的。

由于第一实施例中已经提到,数据查询过程中,当前符合数据查询条件的数据条数是动态更新的,因此,对确定条数的数据进行分页得到的页数也是动态更新的,并且更新完的各个分页标识可见及可查,用户无需等待分页数据全部加载完,可见的分页内容均为已统计,可以直接点击查询指定的分页数据。

为更好理解本实施例中,参照图6,前端展示分页信息如下:

从图6可知,最右边的数据加载中的28/164,164表示符合时间周期的各个分表,28表示当前已经遍历的分表个数,而最左边的29866条记录表示这28个分表中,符合查询条件的数据条数有29866条,这29866条数据分页得到的页数为1494页,由于当前正在进行数据查询和遍历,因此根据上述提到的首页显示原则,当前界面显示第1页的数据(图未示图第1页的具体数据),而图6的数字1-10标识当前显示1至10页的数据,并且按照每10页的间隔显示分页标识。

在本实施例中,通过边查询数据,边根据已经查询出的数据条数更新前端的分页信息,使得用户得知实时当前的数据查询情况。

需要说明的是,在本文中,术语“包括”、“包含”或者其任何其它变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其它要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。

通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1