一种提高大数据统计闲时计算效率的方法及装置的制造方法【
技术领域：
】[0001]本发明涉及通信
技术领域：
，尤其涉及一种提高大数据统计闲时计算效率的方法及目.0【
背景技术：
】[0002]FOTA(FirmwareOverTheAir)是一种无线手机升级软件，FOTA操作记录的大数据统计方案引入了目前大数据领域使用较多的闲时计算，但也存在较多问题。[0003]单张分表的数据量大小与单次闲时任务的计算时间关系耦合度较高，数据量大，计算时间就久，如果单张量小，生成的分表数量会太多，中间件的负担就会太大，如果单张量大，限时任务的计算时间久，且处于写状态的那张分表的数据量也会处于一个较大值，那么，用户在进行统计操作的时候，就很可能会遇到闲时任务还未计算完成的情况，即使没有遇到这种情况，也很可能会面对处于写状态分表数据量较大的情况，那么预期的混合运算的时间就会较久，所带来的用户体验不佳；以分表为基本单元，闲时任务必须要等到分表完成写操作后才能运行，闲时任务的真实运行频率就会处于一个较低的值，效率很低；由于业务需求的特点，当用户点击升级下载，一条升级记录写入数据库，然后等用户完成下载动作，系统会进行回调动作，对之前写入数据库的记录进行下载状态等字段的更新，这个更新所需要的时间与用户完成下载的时间有关，可能快也可能慢，这样一张分表从写完所有数据到切换到只读状态就需要一个不确定的时间，而闲时任务需要等待这个不确定的时间，对效率又是一个降低。【
发明内容】[0004]本发明的主要目的在于提出一种提高大数据统计闲时计算效率的方法及装置，通过将闲时计算的基础单位从分表改为单条记录，提高闲时计算的效率，达到提高服务器的使用效率，提高用户体验的目的。[0005]本发明解决上述技术问题的技术方案如下:[0006]根据本发明的一个方面，提供的一种提高大数据统计闲时计算效率的方法，包括:[0007]将需要进行闲时计算的数据库中的每一个分表拆分为若干个单条记录，所述单条记录中包含更新标识字段；[0008]启动闲时计算任务，通过所述更新标识字段判断所述单条记录是否已完成更新；[0009]若已完成更新，则对所述单条记录进行闲时计算，并将闲时计算的结果生成闲时手艮^；。[0010]优选地，所述单条记录中还包括闲时报表生成字段，用以表示所述单条记录是否已完成闲时计算，并生成闲时报表。[0011]优选地，所述若已完成更新，则对所述单条记录进行闲时计算，并将闲时计算的结果生成闲时报表之后还包括:[0012]将所述单条记录的闲时报表生成字段的值设置为true。[0013]优选地，所述更新标识字段为布尔型的isWritable字段。[0014]优选地，所述启动闲时计算任务，通过所述更新标识字段判断所述单条记录是否已完成更新包括:[0015]启动闲时计算任务；[0016]判断所述更新标识字段的值是否为true，若是则表示所述单条记录正在更新；[0017]若所述更新标识字段的值为false，则表示所述单条记录已完成更新。[0018]作为本发明的另一个方面，提供的一种提高大数据统计闲时计算效率的装置，包括:[0019]拆分模块，用于将需要进行闲时计算的数据库中的每一个分表拆分为若干个单条记录，所述单条记录中包含更新标识字段；[0020]判断模块，用于启动闲时计算任务后，通过所述更新标识字段判断所述单条记录是否已完成更新；[0021]闲时计算模块，用于完成更新后，则对所述单条记录进行闲时计算，并将闲时计算的结果生成闲时报表。[0022]优选地，所述单条记录中还包括闲时报表生成字段，用以表示所述单条记录是否已完成闲时计算，并生成闲时报表。[0023]优选地，还包括:[0024]闲时报表生成模块，用于将所述单条记录的闲时报表生成字段的值设置为true。[0025]优选地，所述更新标识字段为布尔型的isWritable字段。[0026]优选地，所述判断模块包括:[0027]任务启动单元，用于启动闲时计算任务；[0028]更新判断单元，用于判断所述更新标识字段的值是否为true，若是则表示所述单条记录正在更新；若所述更新标识字段的值为false，则表示所述单条记录已完成更新。[0029]本发明提供了一种提高大数据统计闲时计算效率的方法及装置，该方法包括:将需要进行闲时计算的数据库中的每一个分表拆分为若干个单条记录，所述单条记录中包含更新标识字段；启动闲时计算任务，通过所述更新标识字段判断所述单条记录是否已完成更新；若已完成更新，则对所述单条记录进行闲时计算，并将闲时计算的结果生成闲时报表，本发明通过将数据库分表中的数据再一次进行细分为单条记录，使得实时计算器所需要计算的数据是尽可能小的一个值，提高了闲时计算的灵活性和效率，达到了提高服务器的使用效率，提高用户体验的目的。【附图说明】[0030]图1为实现本发明各个实施例的移动终端的硬件结构示意图；[0031]图2为如图1所示的移动终端的无线通信系统示意图；[0032]图3为本发明的实施例一的一种提高大数据统计闲时计算效率的方法的流程图；[0033]图4为本发明的实施例二的一种提高大数据统计闲时计算效率的方法的流程图；[0034]图5为本发明的实施例三的一种提高大数据统计闲时计算效率的方法的流程图；[0035]图6为本发明的实施例四的一种提高大数据统计闲时计算效率的装置的示范性结构框图；[0036]图7为本发明的实施例五的一种提高大数据统计闲时计算效率的装置的示范性结构框图；[0037]图8为本发明的实施例六的一种提高大数据统计闲时计算效率的装置的示范性结构框图。[0038]本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。【具体实施方式】[0039]应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。[0040]图1为实现本发明各个实施例的移动终端的硬件结构示意。[0041]移动终端100可以包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。[0042]无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信系统或网络之间的无线电通信。例如，无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。[0043]广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且，广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供，并且在该情况下，广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在，例如，其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种类型的广播系统接收信号广播。特别地，广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、当前第1页1 2 3 4