一种程序执行的方法和装置与流程

文档序号:16207933发布日期:2018-12-08 07:21阅读:138来源:国知局
本发明涉及计算机和计算机软件
技术领域
:,特别地涉及一种程序执行的方法和装置。
背景技术
:当今社会,数据已经渗透到了每一个行业领域,成为指导生产的重要参考依据。随着数据的迅速膨胀变大,通过对数据的分析,可以指导企业未来的发展方向。现在的大数据都是一些很原子化的信息,真正要让数据转化成有价值的信息,需要人们对海量数据进行挖掘和运用,利用各种技术和统计手段,将离散的数据整合成可以清晰呈现当前现状和预测未来的信息。目前最常见的数据整合技术主要是由开发人员通过sql语言,将这种带有处理逻辑的sql语句封装成各种可调度执行的程序,通常会封装成python、shell、存储过程(预编译的sql语句)或者在java代码中执行sql逻辑。这些封装好的程序每次在运行的时候,代码的执行顺序都是从上而下进行,如果其中某一个功能模块执行失败,则整个程序就执行失败。目前,在程序执行失败时,常见的处理方式如下:1、依赖调度平台的失败自动重跑机制:调度平台会重新开始执行程序,并且会不断地重新执行直到执行成功为止;2、人工手动重跑程序:即:人工处理的方式,开发人员通过临时注释掉已经成功的模块代码,然后上传程序并续跑,待程序执行成功后再把注释去掉,并重新上传程序。在实现本发明的过程中,发明人发现现有技术存在如下技术问题:1、依赖调度平台的失败自动重跑机制,每次都是从头开始再执行一遍所有的程序,之前已经执行成功的功能模块会重复执行,无法做到“断点续传”,因此浪费了资源,延长了整个程序的执行时间;2、目前虽然能通过人工处理的方式解决程序重复执行的问题,但是每次都需要人工手动添加注释修改代码,且在程序执行完成后还得再恢复原来的代码,这样操作很不灵活,而且人工操作的不稳定性会导致程序下次执行时出现异常。技术实现要素:有鉴于此,本发明提供一种程序执行的方法和装置,能够在程序执行失败后,采用高效、节约资源的方式进行程序重跑。为实现上述目的,根据本发明的一个方面,提供了一种程序执行的方法。一种程序执行的方法,包括:根据程序的执行记录名称从已有的执行记录中查找所述程序对应的执行记录;根据所述执行记录确定所述程序此次执行的起始位置;从所述起始位置开始执行所述程序并生成执行记录,然后将所述生成的执行记录更新为所述程序对应的执行记录。可选地,所述执行记录名称包括程序名称和参数。可选地,所述执行记录包括:程序名称、执行输入的参数、模块标识、模块代码、模块执行开始时间、模块执行结束时间以及模块执行结果。可选地,还包括:如果从所述已有的执行记录中未查找到所述程序对应的执行记录,则从所述程序的第一个模块开始执行所述程序,所述程序由不少于一个模块构成。可选地,根据所述执行记录确定所述程序此次执行的起始位置的步骤包括:根据所述执行记录的最后一条数据记录确定所述程序执行的断点模块,所述断点模块为所述程序上次执行的最后一个模块;根据所述断点模块的执行结果确定所述程序此次执行的起始位置。可选地,根据所述断点模块的执行结果确定所述程序此次执行的起始位置的步骤包括:若所述断点模块的执行结果为成功,则将所述断点模块的下一个模块确定为所述程序此次执行的起始位置;若所述断点模块的执行结果为失败,则将所述断点模块确定为所述程序此次执行的起始位置。可选地,还包括:定时清理所述执行记录。根据本发明的另一方面,提供了一种程序执行的装置。一种程序执行的装置,包括:记录查找单元,用于根据程序的执行记录名称从已有的执行记录中查找所述程序对应的执行记录;位置确定单元,用于根据所述执行记录确定所述程序此次执行的起始位置;记录生成单元,用于从所述起始位置开始执行所述程序并生成执行记录,然后将所述生成的执行记录更新为所述程序对应的执行记录。可选地,所述执行记录名称包括程序名称和参数。可选地,所述执行记录包括:程序名称、执行输入的参数、模块标识、模块代码、模块执行开始时间、模块执行结束时间以及模块执行结果。可选地,还包括判定执行单元,用于如果从所述已有的执行记录中未查找到所述程序对应的执行记录,则从所述程序的第一个模块开始执行所述程序,所述程序由不少于一个模块构成。可选地,所述位置确定单元还用于:根据所述执行记录的最后一条数据记录确定所述程序执行的断点模块,所述断点模块为所述程序上次执行的最后一个模块;根据所述断点模块的执行结果确定所述程序此次执行的起始位置。可选地,所述位置确定单元还用于:若所述断点模块的执行结果为成功,则将所述断点模块的下一个模块确定为所述程序此次执行的起始位置;若所述断点模块的执行结果为失败,则将所述断点模块确定为所述程序此次执行的起始位置。可选地,还包括记录清理单元,用于:定时清理所述执行记录。根据本发明的又一方面,提供了一种程序执行的终端。一种程序执行的终端,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例所提供的程序执行的方法。根据本发明的再一方面,提供了一种计算机可读介质。一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现本发明实施例所提供的程序执行的方法。上述发明中的一个实施例具有如下优点或有益效果:根据程序对应的执行记录,快速地确定断点模块,进而确定程序此次执行的起始点位置,从而节省了程序执行的时间,避免了程序的重复执行带来的资源浪费,克服了人工操作带来的不灵活和不稳定性缺点。上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。附图说明附图用于更好地理解本发明,不构成对本发明的不当限定。其中:图1是根据本发明实施例的程序执行的方法的主要步骤示意图;图2是根据本发明实施例的程序执行的方法的流程图;图3是根据本发明实施例的程序执行的装置的主要模块示意图;图4是本发明实施例可以应用于其中的示例性系统架构图;图5是适于用来实现本发明实施例的终端的计算机系统的结构示意图。具体实施方式以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。图1是根据本发明实施例的程序执行的方法的主要步骤示意图。如图1所示,本发明实施例的程序执行的方法主要包括如下的步骤s101至步骤s103。步骤s101:根据程序的执行记录名称从已有的执行记录中查找该程序对应的执行记录。根据本发明的实施例,执行记录名称可以包括程序名称和参数。并且,执行记录主要可以包括:程序名称、执行输入的参数、模块标识、模块代码、模块执行开始时间、模块执行结束时间以及模块执行结果等内容。根据本发明的实施例,执行记录还可以包括例如该模块对应的目标表等内容。其中,程序的执行记录是在程序执行的过程中产生的,并被保存下来,形成一份程序执行过程的记忆文件。程序在执行的过程中,会生成相应的执行记录,每一个执行记录文件有一个全局唯一的名称,名称可以由程序名称和参数组成,也可以包括执行日期等内容。由于执行记录的存在目的是方便程序执行失败时的断点续跑,因此同一个执行记录名称对应的内容会被多次覆盖,且只保留最近一次的执行记录,无需保留所有的执行记录,从而可以节省存储空间,以及更方便、快速地找到该程序上次执行失败的地方。本发明中述及的“断点续跑”,衍生于断点续传,断点续传是指在上传下载文件时,如果碰到网络故障,可以从已经上传或下载的部分开始继续上传下载未完成的部分,没必要从头(程序的第一个模块)开始上传下载,以节省时间提高效率。同理,断点续跑就是指程序在执行某个功能模块失败后,从上次执行失败的地方开始继续执行,不必从头(程序的第一个模块)开始。以如下所示的执行记录的内容样式为例:breakpoint_test.py2011-01-01#appsq1_1#table_1#select*fromtest#2011-01-0109:00#2011-01-0109:01#successedsq1_2#table_2#select*fromtable_1#2011-01-0109:02#2011-01-0109:05#failed其中,第1行“breakpoint_test.py”表示执行的程序的程序名称;第2行“2011-01-01#app”表示此次程序执行时输入的参数串,当有多个参数时使用“#”进行分割,“2011-01-01”表示接收的第一个参数,“app”表示接收的第二个参数,如果还有其他参数,可依次类推;第3行和第4行表示执行记录的主体部分,每一行记录一个独立功能模块代码的执行记录,执行记录中包括的多个内容之间用“#”进行分割,分割的内容分别是模块标识、该模块对应的目标表、模块代码、模块执行开始时间、模块执行结束时间、模块执行结果(成功/失败标识)。步骤s102:根据执行记录确定该程序此次执行的起始位置。其中,若步骤s101中,如果从所述已有的执行记录中未查找到该程序对应的执行记录,则从程序的第一个模块开始执行该程序,其中,本发明实施例中的程序可根据功能划分为不少于一个模块。由于一个独立的程序在执行时,其中包含的功能模块是串行执行的,所以执行记录中的最后一条数据记录是程序下次进行断点续跑的重要参考依据。根据本发明实施例的技术方案,步骤s102根据执行记录确定该程序此次执行的起始位置具体可以包括如下的步骤:步骤s1021:根据执行记录的最后一条数据记录确定该程序执行的断点模块,断点模块为该程序上次执行的最后一个模块;步骤s1022:根据断点模块的执行结果确定该程序此次执行的起始位置。其中,步骤s1022根据断点模块的执行结果确定该程序此次执行的起始位置,具体可以包括以下两种情况:若断点模块的执行结果为成功,则将断点模块的下一个模块确定为该程序此次执行的起始位置;若断点模块的执行结果为失败,则将断点模块确定为该程序此次执行的起始位置。程序在开始执行前,根据程序名称和输入的执行参数生成执行记录名称,然后根据执行记录名称,在已经产生的执行记录中寻找是否存在对应的执行记录。如果不存在对应的执行记录,说明该程序当天(以程序在一天之内只执行一次为例)是第一次执行,则从程序的第一个模块开始正常执行程序即可。如果找到了对应的执行记录,说明该程序当天已执行过,则根据找到的执行记录中的最后一条数据记录找到该程序上次执行的断点模块,其中,断点模块是程序上次执行的最后一个模块。然后,根据最后一条数据记录中的模块执行结果来确定程序此次执行的起始位置。其中,通过对断点模块的模块执行结果进行文本信息匹配,以得到断点模块是否执行成功。若断点模块已执行成功,则从断点模块的下一个模块开始执行程序;若断点模块执行失败,则从断点模块开始执行程序。通过前述的依赖执行记录自动定位程序执行起始点的方式,可以快速判断该程序当天相同条件下是否运行过,以及上次运行的断点处在哪里,从而避免了通过人为注释程序的方式所引起的重跑时间和资源的浪费。步骤s103:从该起始位置开始执行该程序并生成执行记录,并将生成的执行记录更新为该程序对应的执行记录。由于执行记录的存在目的是方便程序执行失败时的断点续跑,因此可通过将新生成的执行记录更新为该程序对应的执行记录的方式,只保留最近一次的执行记录,以便该程序下次执行时可以快速地确定起始点位置。另外,根据本发明的实施例的技术方案,还需要定时清理所述执行记录。由于一般情况下,程序在某个日期内只会执行一次,因此可设置每天清理一次执行记录。清理执行记录的目的是避免多天后程序重新执行时会造成错误。执行记录主要用于在程序执行失败后,重新执行时可以提高效率、节省不必要的重复步骤,因此,程序执行失败时应当当天解决问题,否则就会影响第二天的正常运行,故而可以设定每天的24点删除当天产生的执行记录。例如:假设某程序已有的执行记录的记录时间为2020年1月1日,如果未定时清理执行记录,则当后期例如2020年3月1日调整了该程序的执行逻辑需要重新执行时,系统会误以为是程序执行失败而需要进行断点续跑,因此会从2020年1月1日保存的执行记录中查找断点模块,此时就会出现报错的情况。同时,定时清理执行记录还可以减少系统存储执行记录的空间,以及加快执行记录的查找速度,节省程序执行时间。根据以上所述的步骤s101至步骤s103,可以实现在当天程序执行失败后,高效、智能地进行程序的断点续跑,且能节省系统资源。图2是根据本发明实施例的程序执行的方法的流程图。如图2所示,程序开始执行前,通过将程序名称和输入的执行参数拼接生成执行记录名称(步骤s201),然后根据生成的执行记录名称从已有的执行记录中查找是否存在对应的执行记录(步骤s202)。如果存在对应的执行记录,则获取执行记录的最后一条数据记录,并获取该程序上次执行的最后一个模块,从而获取该程序上次执行的断点模块(步骤s203)。然后,根据最后一条数据记录中保存的断点模块的执行结果判断断点模块是否执行成功(步骤s204)。如果断点模块执行成功,则从断点模块的下一个模块开始执行程序(步骤s205);否则,从断点模块开始执行程序(步骤s206)。最后,将该程序执行时生成的执行记录覆盖该程序对应的已有的执行记录,从而更新该程序的执行记录(步骤s207)。如果不存在对应的执行记录,则根据输入的执行参数从程序的第一个模块开始执行程序(步骤s208),并保存生成的执行记录(步骤s209)。由上述的步骤s201至步骤s209,可以根据程序对应的执行记录,快速地确定断点模块,进而确定程序此次执行的起始位置,从而节省了程序执行的时间,避免了程序的重复执行带来的资源浪费,克服了人工操作带来的不灵活和不稳定性缺点。图3是根据本发明实施例的程序执行的装置的主要模块示意图。如图3所示,本发明实施例的程序执行的装置300主要包括记录查找单元301、位置确定单元302和记录生成单元303。记录查找单元301用于根据程序的执行记录名称从已有的执行记录中查找所述程序对应的执行记录;位置确定单元302用于根据所述执行记录确定所述程序此次执行的起始位置;记录生成单元303用于从所述起始位置开始执行所述程序并生成执行记录,然后将所述生成的执行记录更新为所述程序对应的执行记录。其中,执行记录名称可以包括程序名称和参数。根据本发明的实施例,执行记录主要可以包括:程序名称、执行输入的参数、模块标识、模块代码、模块执行开始时间、模块执行结束时间以及模块执行结果。根据本发明实施例的技术方案,程序执行的装置300还可以包括判定执行单元(图中未示出),用于如果从已有的执行记录中未查找到该程序对应的执行记录,则从该程序的第一个模块开始执行该程序,程序由不少于一个模块构成。根据本发明的实施例,位置确定单元302还可以用于:根据执行记录的最后一条数据记录确定该程序执行的断点模块,断点模块为该程序上次执行的最后一个模块;根据断点模块的执行结果确定该程序此次执行的起始位置。其中,位置确定单元302还可以用于:若断点模块的执行结果为成功,则将断点模块的下一个模块确定为序此次执行的起始位置;若断点模块的执行结果为失败,则将断点模块确定为程序此次执行的起始位置。另外,本发明实施例的程序执行的装置300还可以包括记录清理单元(图中未示出),用于:定时清理执行记录。图4示出了可以应用本发明实施例的程序执行的方法或程序执行的装置的示例性系统架构400。如图4所示,系统架构400可以包括终端设备401、402、403,网络404和服务器405。网络404用以在终端设备401、402、403和服务器405之间提供通信链路的介质。网络404可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。用户可以使用终端设备401、402、403通过网络404与服务器405交互,以接收或发送消息等。终端设备401、402、403上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。终端设备401、402、403可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。服务器405可以是提供各种服务的服务器,例如对用户利用终端设备401、402、403所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理,并将处理结果(例如目标推送信息、产品信息--仅为示例)反馈给终端设备。需要说明的是,本发明实施例所提供的程序执行的方法一般由服务器405执行,相应地,程序执行的装置一般设置于服务器405中。应该理解,图4中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。下面参考图5,其示出了适于用来实现本发明实施例的终端的计算机系统500的结构示意图。图5示出的终端仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。如图5所示,计算机系统500包括中央处理单元(cpu)501,其可以根据存储在只读存储器(rom)502中的程序或者从存储部分508加载到随机访问存储器(ram)503中的程序而执行各种适当的动作和处理。在ram503中,还存储有系统500操作所需的各种程序和数据。cpu501、rom502以及ram503通过总线504彼此相连。输入/输出(i/o)接口505也连接至总线504。以下部件连接至i/o接口505:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(crt)、液晶显示器(lcd)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如lan卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至i/o接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的计算机程序根据需要被安装入存储部分508。特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(cpu)501执行时,执行本发明的系统中限定的上述功能。需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、rf等等,或者上述的任意合适的组合。附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。描述于本发明实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括记录查找单元、位置确定单元和记录生成单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,记录查找单元还可以被描述为“用于根据程序的执行记录名称从已有的执行记录中查找所述程序对应的执行记录的单元”。作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:根据程序的执行记录名称从已有的执行记录中查找所述程序对应的执行记录;根据所述执行记录确定所述程序此次执行的起始位置;从所述起始位置开始执行所述程序并生成执行记录,然后将所述生成的执行记录更新为所述程序对应的执行记录。根据本发明实施例的技术方案,根据程序对应的执行记录,快速地确定断点模块,进而确定程序此次执行的起始点位置,从而节省了程序执行的时间,避免了程序的重复执行带来的资源浪费,克服了人工操作带来的不灵活和不稳定性缺点。上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。当前第1页12当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1