一种用于数据同步中的异常检测的方法与设备的制造方法

文档序号:9579331阅读:293来源:国知局
一种用于数据同步中的异常检测的方法与设备的制造方法
【技术领域】
[0001]本申请涉及计算机领域,尤其涉及一种用于数据同步中的异常检测的技术。
【背景技术】
[0002]在现有技术中,一种典型的数据库系统部署模式为主备模式,S卩,数据库系统由主数据库和与该主数据库对应的备份数据库构成。其中,数据库系统通过数据同步复制机制保证主数据库和备份数据库的数据一致性。具体地,在对数据库系统执行数据更新操作时,将待更新的数据写入主数据库中并在数据写入完成之后,将该数据同步复制到备份数据库中。如此一来,如果主数据库出现失效的情况,可以由备份数据库接管主数据库的任务以不间断地向用户提供数据服务,从而达到容灾备份的目的。
[0003]在主数据库和备份数据库进行数据同步复制的过程中,由于数据需要经历解析、传输、写入等处理环节,而在任一处理环节内都可能存在数据丢失、损坏等隐患,从而导致同步至备份数据库中数据发生错误,进而导致备份数据库在接管主数据库的任务之后无法正常运行的可能。在这种情况下,同步复制机制将无法百分之百地起到保证主数据库和备份数据库的数据一致性的作用。
[0004]目前,针对于主数据库和备份数据库之间数据同步复制过程的自我校验技术几乎是空白。而且即使是在主数据库和备份数据库的数据同步复制机制中加入自我校验功能,但是由于数据同步复制的同时进行同步数据的校验,也将在一定程度上导致数据同步复制过程本身性能的严重下降。此外,如果数据同步复制过程本身出现异常,那么自我校验功能也将无法有效地执行。

【发明内容】

[0005]本申请的目的是提供一种用于数据同步中的异常检测的方法与设备。
[0006]根据本申请的一个方面,提供了一种用于数据同步中的异常检测的方法,其中,该方法包括:
[0007]在主数据库与备份数据库的同步过程中确定所述备份数据库中待检测的同步数据所对应的目标范围;
[0008]获取与所述目标范围相对应的基准数据;
[0009]根据所述基准数据检测所述待检测的同步数据是否与所述主数据库中的对应数据相一致。
[0010]根据本申请的另一方面,还提供了一种用于数据同步中的异常检测的设备,其中,该设备包括:
[0011]第一装置,用于在主数据库与备份数据库的同步过程中确定所述备份数据库中待检测的同步数据所对应的目标范围;
[0012]第二装置,用于获取与所述目标范围相对应的基准数据;
[0013]第三装置,用于根据所述基准数据检测所述待检测的同步数据是否与所述主数据库中的对应数据相一致。
[0014]与现有技术相比,本申请通过在主数据库与备份数据库的同步过程中确定备份数据库中待检测的同步数据的目标范围以及该目标范围所对应的基准数据,并根据该基准数据检测备份数据库中待检测的同步数据是否与主数据库中的对应数据相一致,实时、高效且准确地实现了主数据库与备份数据库之间同步数据的一致性检测,在不影响主数据库与备份数据库之间同步性能的同时,保证了主数据库与备份数据库之间同步数据的一致性。
【附图说明】
[0015]通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
[0016]图1示出根据本申请一个方面的一种用于数据同步中的异常检测的设备示意图;
[0017]图2示出根据本申请一个优选实施例的一种用于数据同步中的异常检测的设备不意图;
[0018]图3示出根据本申请另一个优选实施例的一种用于数据同步中的异常检测的设备意图;
[0019]图4示出根据本申请另一个方面的一种用于数据同步中的异常检测的方法流程图;
[0020]图5示出根据本申请一个优选实施例的一种用于数据同步中的异常检测的方法流程图;
[0021]图6示出根据本申请另一个优选实施例的一种用于数据同步中的异常检测的方法流程图。
[0022]附图中相同或相似的附图标记代表相同或相似的部件。
【具体实施方式】
[0023]下面结合附图对本申请作进一步详细描述。
[0024]在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPR0M)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括非暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
[0025]图1示出根据本申请一个方面的一种用于数据同步中的异常检测的设备10,其中,该设备10包括第一装置100、第二装置110和第三装置120。具体地,第一装置100在主数据库20与备份数据库30的同步过程中确定所述备份数据库30中待检测的同步数据所对应的目标范围;第二装置110获取与所述目标范围相对应的基准数据;第三装置120根据所述基准数据检测所述待检测的同步数据是否与所述主数据库20中的对应数据相一致。
[0026]在此,设备10可以是本地设备,也可以是网络设备。其中,网络设备可由网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云等实现。在此,云由基于云计算(Cloud Computing)的大量主机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个超级虚拟计算机。本领域技术人员应能理解上述设备仅为举例,其他现有的或今后可能出现的设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。在此,所述设备包括一种能够按照事先设定或存储的指令,自动进行数值计算和信息处理的电子设备,其硬件包括但不限于微处理器、专用集成电路(ASIC)、可编程门阵列(FPGA)、数字处理器(DSP)、嵌入式设备等。
[0027]具体地,数据库系统部署为主备模式,即数据库系统包括主数据库20和与该主数据库20对应的备份数据库30。当主数据库20中的数据发生变化时,例如新数据的写入或原始数据的修改,为了使备份数据库30中的数据和主数据库20中的数据一致,主数据库20和备份数据库30之间需要进行数据的同步。在主数据库20和备份数据库30的同步过程中,设备10对同步至备份数据库30的数据进行一致性的检测,其中,下文中将该数据称为待检测的同步数据。需要说明的是,在本实施例中,所述设备10优选地以第三方设备的方式出现,即所述设备10独立于主数据库20以及备份数据库30,如此一来,即使主数据库20和/或备份数据库30出现任何异常状况(例如宕机等),设备10也不会受到影响,可以正常工作。
[0028]第一装置100在主数据库20与备份数据库30的同步过程中确定所述备份数据库30中待检测的同步数据所对应的目标范围。其中,当主数据库20和备份数据库30进行数据同步时,同步数据将写入备份数据库30中,也就是说,一旦备份数据库30中发生数据写操作,则表明主数据库20和备份数据库30之间在进行数据同步。因此,在一个优选实施例中,在主数据库20与备份数据库30进行数据同步的过程中,第一装置100根据对所述备份数据库30的数据写操作确定所述备份数据库30中待检测的同步数据所对应的目标范围。以备份数据库30是MySQL数据库为例进行说明。在主数据库20和备份数据库30进行数据同步的过程中,同步数据在写入备份数据库30时
当前第1页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1