一种多任务的执行方法和装置与流程

本发明涉及计算机技术领域，尤其涉及一种多任务的执行方法和装置。

背景技术：

在大数据领域，经常会有同一个业务领域多个任务需要同时处理的情况，在此场景下，很容易想到多线程或多进程来并行处理任务，以提升效率。现行的技术方案，可分为两种：一是不使用多线程或多进程，同一个业务领域用多个任务同时去执行，这种方案由于任务过多，存在分散不方便维护的缺陷；二是使用常规的多线程的方式，这种方案只是简单地用到了多线程技术，需要事后人工发现问题，然后去做处理应对。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

现有方案需要事后人工发现问题并应对，运维维护成本高。

技术实现要素：

有鉴于此，本发明实施例提供一种多任务的执行方法和装置，能够优化多任务执行的异常处理机制，及时捕获异常，有效规避失败情况的发生，降低出错几率，大大减少人工干预和运维维护成本。

为实现上述目的，根据本发明实施例的一个方面，提供了一种多任务的执行方法。

一种多任务的执行方法，包括：根据任务信息生成执行单元对象集合，所述执行单元对象集合包括用于执行任务的执行单元对象；运行所述执行单元对象集合中的执行单元对象以便执行任务，并根据所述执行单元对象的对象特性捕获运行异常的执行单元对象；重试所述运行异常的执行单元对象，以便重新执行相应的任务。

可选地，重试所述运行异常的执行单元对象的步骤之前，包括：更新所述执行单元对象集合的可重试次数；所述重试所述运行异常的执行单元对象，以便重新执行相应的任务的步骤包括：根据所述运行异常的执行单元对象更新所述执行单元对象集合；检查更新后的所述执行单元对象集合是否符合重试条件，若符合，则返回所述运行所述执行单元对象集合中的执行单元对象以便执行任务，并根据所述执行单元对象的对象特性捕获运行异常的执行单元对象的步骤，否则，结束流程；其中，所述重试条件为：所述执行单元对象集合非空且所述执行单元对象集合的当前可重试次数大于零。

可选地，根据所述执行单元对象的对象特性捕获运行异常的执行单元对象的步骤，包括：遍历所述执行单元对象集合中各执行单元对象的对象特性中存储的相应执行单元对象的运行状态信息；捕获所述运行状态信息指示为运行异常的执行单元对象。

可选地，根据所述执行单元对象的对象特性捕获运行异常的执行单元对象的步骤之前，包括：通过自定义的执行单元对象处理类将所述执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中。

可选地，所述执行单元对象为线程对象或者进程对象。

根据本发明实施例的另一方面，提供了一种多任务的执行装置。

一种多任务的执行装置，包括：生成模块，用于根据任务信息生成执行单元对象集合，所述执行单元对象集合包括用于执行任务的执行单元对象；运行模块，用于运行所述执行单元对象集合中的执行单元对象以便执行任务，并根据所述执行单元对象的对象特性捕获运行异常的执行单元对象；重试模块，用于重试所述运行异常的执行单元对象，以便重新执行相应的任务。

可选地，还包括更新模块，用于：更新所述执行单元对象集合的可重试次数；所述重试模块还用于：根据所述运行异常的执行单元对象更新所述执行单元对象集合；检查更新后的所述执行单元对象集合是否符合重试条件，若符合，则由所述运行模块和所述重试模块相继执行各自的动作，否则，结束所述装置的执行流程；其中，所述重试条件为：所述执行单元对象集合非空且所述执行单元对象集合的当前可重试次数大于零。

可选地，所述运行模块包括捕获模块，用于：遍历所述执行单元对象集合中各执行单元对象的对象特性中存储的相应执行单元对象的运行状态信息；捕获所述运行状态信息指示为运行异常的执行单元对象。

可选地，还包括存储模块，用于：通过自定义的执行单元对象处理类将所述执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中。

可选地，所述执行单元对象为线程对象或者进程对象。

根据本发明实施例的又一方面，提供了一种电子设备。

一种电子设备，包括：一个或多个处理器；存储器，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现本发明实施例提供的多任务的执行方法。

根据本发明实施例的又一方面，提供了一种计算机可读介质。

一种计算机可读介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明实施例提供的多任务的执行方法。

上述发明中的一个实施例具有如下优点或有益效果：根据任务信息生成执行单元对象集合，执行单元对象集合包括用于执行任务的执行单元对象；运行执行单元对象集合中的执行单元对象以便执行任务，并根据所述执行单元对象的对象特性捕获运行异常的执行单元对象；重试运行异常的执行单元对象，以便重新执行相应的任务。能够优化多任务执行的异常处理机制，及时捕获异常，有效规避失败情况的发生，降低出错几率，大大减少人工干预和运维维护成本。通过自定义的执行单元对象处理类将执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中，使得可以自动并及时捕获运行异常的执行单元对象；预先设定执行单元对象集合的可重试次数，可重试次数可以根据系统和环境的实际情况灵活配置，最大限度地保证多线程任务正常执行，尽可能减少人工干预和维护成本。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是根据本发明实施例的多任务的执行方法的主要步骤示意图；

图2是根据本发明实施例的基于多线程的任务执行方法的优选流程示意图；

图3是根据本发明实施例的多任务的执行装置的主要模块示意图；

图4是本发明实施例可以应用于其中的示例性系统架构图；

图5是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

图1是根据本发明实施例的多任务的执行方法的主要步骤示意图。

如图1所示，本发明实施例的多任务的执行方法主要包括如下的步骤s101至步骤s103。

步骤s101：根据任务信息生成执行单元对象集合。

其中，执行单元对象集合包括用于执行任务的执行单元对象。

并且，执行单元可以是线程或进程，相应地，执行单元对象可以为线程对象或者进程对象。

本发明实施例的任务为根据业务需求分解而成的各独立的任务，每个任务通过编程实现一个单独的可执行方法，即任务方法。

任务信息可包括任务方法和任务方法参数(例如任务名称、任务自带的与业务相关的参数等)，根据任务信息生成执行单元对象集合具体可以利用任务方法和任务方法参数，生成对应的一组执行单元对象，这组执行单元对象构成执行单元对象集合，执行单元对象集合可以为数组的形式，例如，执行单元对象为线程对象时，执行单元对象集合可以是一个线程对象数组。通过运行执行单元对象来执行相应的任务。

步骤s102：运行执行单元对象集合中的执行单元对象以便执行任务，并根据执行单元对象的对象特性捕获运行异常的执行单元对象。

可并行运行执行单元对象集合中的执行单元对象以便执行任务。根据执行单元对象的对象特性捕获运行异常的执行单元对象的步骤之前，可通过自定义的执行单元对象处理类将执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中。每个执行单元对象有各自的对象特性，对象特性用于存储相应执行单元对象的运行状态信息。

根据执行单元对象的对象特性捕获运行异常的执行单元对象，具体地，可以遍历执行单元对象集合中各执行单元对象的对象特性中存储的运行状态信息，并捕获运行状态信息指示为运行异常的执行单元对象。

步骤s103：重试运行异常的执行单元对象，以便重新执行相应的任务。

重试运行异常的执行单元对象之前，更新执行单元对象集合的可重试次数，更新执行单元对象集合的可重试次数具体可以将该可重试次数减1。

执行单元对象集合的可重试次数可以根据系统和环境的实际情况预先灵活设置一个初始值。也可以在每运行一次执行单元对象集合中的执行单元对象之后，将执行单元对象集合的可重试次数减1。通过预先设置执行单元对象集合的可重试次数能够最大限度地保证多任务正常执行，使得在预设的可重试次数范围内，执行单元对象集合中的运行异常的执行单元对象可以多次重试，直到线程对象数组的可重试次数小于或等于0，流程自动结束，尽可能减少人工干预和维护成本。

步骤s103具体可包括：根据运行异常的执行单元对象更新执行单元对象集合，然后检查更新后的执行单元对象集合是否符合重试条件，若符合，则返回步骤s102，否则，结束流程。其中，重试条件可以为：执行单元对象集合非空(即执行单元对象集合中有执行单元对象)且执行单元对象集合的当前可重试次数大于零。

当步骤s102中未捕获到运行异常的执行单元对象，则根据运行异常的执行单元对象更新执行单元对象集合，使得更新后的执行单元对象集合为空，即更新后的执行单元对象集合中不存在运行异常的执行单元对象，则结束流程。

当步骤s102中捕获到运行异常的执行单元对象，则根据运行异常的执行单元对象更新执行单元对象集合，使得更新后的执行单元对象集合中的执行单元对象为该捕获到的运行异常的执行单元对象，然后检查更新后的执行单元对象集合是否符合上述重试条件，若符合，则返回步骤s102，以便运行该更新后的执行单元对象集合中的执行单元对象，并再次并捕获其中运行异常的执行单元对象，并再次执行步骤s103，如此循环上述过程，直到执行单元对象集合为空或者执行单元对象集合的当前可重试次数小于或等于0时，流程结束。

本发明实施例的多任务的执行方法可以通过运行多线程对象或多进程对象来执行多任务。例如，可创建多个线程对象，通过多线程将多任务的执行指令由线程所在服务器提交到数据集市服务器(用于执行任务的服务器)，通过数据集市服务器按照执行指令执行任务的处理或计算，然后将处理或计算的结果返回线程所在服务器。再如，也可以通过进程所在服务器本身来运行创建的多个进程对象，执行任务的处理或计算，得到处理或计算结果。大型业务系统的多任务并发处理可以采用占用资源较少的多线程执行任务的方法。

下面以多线程为例，介绍本发明实施例的多任务的执行方法。

图2是根据本发明实施例的基于多线程的任务执行方法的优选流程示意图。

图2的基于多线程的任务执行方法可以利用python语言的多线程技术来实现。为了捕获运行异常的线程对象以及保存运行异常的线程对象的运行状态信息，先将线程对象化。本发明实施例运用了面向对象的设计原理，创建了自定义的多线程处理类(runscriptthread)。该多线程处理类runscriptthread继承了python语言的threading.thread类，重写了该类的初始化方法__init__()和线程运行方法run()。其中，重写后的初始化方法__init__()用来接收传递的任务方法名称funcname和任务方法参数args。重写后的线程运行方法run()方法可以用于调用私有方法_run()，该私有方法_run()用于调用任务方法名称funcname对应的业务方法，并捕获及输出线程对象运行中的异常。run()捕获_run()输出的异常，该输出的异常以运行状态信息的形式被存储在多线程处理类runscriptthread的线程对象的对象特性exitcode中。

图2的基于多线程的任务执行方法的优选流程具体可以包括如下的步骤s201至步骤s208。

步骤s201：利用任务方法和任务方法参数，生成线程对象数组。

具体地，利用任务方法和任务方法参数生成一组线程对象，这组线程对象存储在一个线程对象数组中。

每个线程对象对应一对象特性exitcode，可以为每个线程对象的对象特性exitcode设置运行状态信息以指示运行正常或运行异常，例如设置0指示运行正常，1指示运行异常，初始状态下没有运行异常情况发生，可设置exitcode的初始值为0。

步骤s202：设置线程对象数组的可重试次数。

步骤s203：判断线程对象数组的当前可重试次数是否大于0，若是，则执行步骤s204，否则，结束流程。

步骤s204：判断线程对象数组是否为空，若否，则执行步骤s205，若是，则结束流程。

当线程对象数组中有线程对象，则该线程对象数组不为空，否则该线程对象数组为空。

步骤s205：运行线程对象数组中的线程对象以便执行任务，并将线程对象的运行状态信息存储在相应的线程对象的对象特性中。

并行运行线程对象数组中的所有线程对象以便执行各线程对象对应的任务，当有线程对象运行异常时，自定义的多线程处理类(runscriptthread)将指示运行异常的运行状态信息(例如1)存储在该线程对象的对象特性中，即将exitcode＝0更新为exitcode＝1。

步骤s206：更新线程对象数组的可重试次数。

更新线程对象数组的可重试次数具体可以将线程对象数组的可重试次数减1。

步骤s207：循环检查运行线程对象数组中的线程对象的对象特性，以捕获运行异常的线程对象。

具体地，循环检查运行线程对象数组中的各线程对象的对象特性exitcode中的运行状态信息，捕获运行状态信息指示为运行异常的线程对象，例如捕获exitcode＝1的线程对象。

步骤s208：将线程对象数组中的线程对象更新为捕获的运行异常的线程对象，然后返回步骤s203。

可使用一个异常线程对象数组存储捕获的运行异常的线程对象。通过将异常线程对象数组赋值给线程对象数组，将线程对象数组中的线程对象更新为捕获的运行异常的线程对象，同时清空异常线程对象数组。如果没有捕获到运行异常的线程对象，则异常线程对象数组为空，将该空的异常线程对象数组赋值给线程对象数组之后，得到的线程对象数组为空，在返回步骤s203之后，如果线程对象数组的当前可重试次数大于0，则继续执行步骤s204，由于当前的线程对象数组为空，则结束流程，如果线程对象数组的当前可重试次数小于或等于0，则在步骤s203结束流程。

本发明实施例的上述步骤s201至步骤s208可以利用自定义线程处理类runscriptthread来实现，自定义线程处理类runscriptthread继承了python语言的线程类threading.thread类，扩展了异常信息捕获和保存的功能，使得可以及时捕获运行异常的线程对象，优化了现有的多任务执行的异常处理机制。

本发明实施例还可以适用于基于多进程的任务执行，相应地，基于多进程的任务执行方法通过自定义的进程处理类来实现，该自定义的进程处理类可以继承python语言的进程类，增加指示运行异常状态的属性(即进程对象的对象特性)，并增加用于捕获运行异常的进程对象的异常捕获机制，当发生进程对象运行异常时在异常状态属性中记录异常状态。此外，本发明实施例不限于使用python语言，也适用于其他支持线程和进程技术、可自带异常捕获机制或者可以扩充异常捕获功能的其他程序语言。

图3是根据本发明实施例的多任务的执行装置的主要模块示意图。

如图3所示，本发明实施例的多任务的执行装置300主要包括：生成模块301、运行模块302、重试模块303。

生成模块301用于根据任务信息生成执行单元对象集合。

执行单元对象集合包括用于执行任务的执行单元对象。

执行单元对象可以为线程对象或者进程对象。

运行模块302用于运行执行单元对象集合中的执行单元对象以便执行任务，并根据执行单元对象的对象特性捕获运行异常的执行单元对象。对象特性用于存储相应执行单元对象的运行状态信息。

多任务的执行装置300可以包括存储模块，用于通过自定义的执行单元对象处理类将执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中。

运行模块302具体可以包括捕获模块，用于遍历执行单元对象集合中各执行单元对象的对象特性中存储的运行状态信息，并捕获运行状态信息指示为运行异常的执行单元对象。

多任务的执行装置300还可以包括更新模块，用于更新执行单元对象集合的可重试次数。

重试模块303用于重试运行异常的执行单元对象，以便重新执行相应的任务。

重试模块303可以根据运行异常的执行单元对象更新执行单元对象集合；检查更新后的执行单元对象集合是否符合重试条件，若符合，则由运行模块302和重试模块303相继执行各自的动作，以重试运行异常的执行单元对象，否则，结束装置300的执行流程。具体地，当捕获模块捕获到运行异常的执行单元对象，重试模块303根据运行异常的执行单元对象更新执行单元对象集合，使得更新后的执行单元对象集合中的执行单元对象为该捕获到的运行异常的执行单元对象，然后检查更新后的执行单元对象集合是否符合上述重试条件，若符合，则重新由运行模块302运行执行单元对象集合中的执行单元对象以便执行任务，并根据执行单元对象的对象特性捕获运行异常的执行单元对象，再由重试模块303重试运行异常的执行单元对象，以便重新执行相应的任务，如此循环上述过程，直到执行单元对象集合为空或者执行单元对象集合的当前可重试次数小于或等于0时，装置300的各模块执行的流程结束。其中，重试条件可以为：执行单元对象集合非空且执行单元对象集合的当前可重试次数大于零。

另外，在本发明实施例中多任务的执行装置的具体实施内容，在上面多任务的执行方法中已经详细说明了，故在此重复内容不再说明。

图4示出了可以应用本发明实施例的多任务的执行方法或多任务的执行装置的示例性系统架构400。

如图4所示，系统架构400可以包括终端设备401、402、403，网络404和服务器405。网络404用以在终端设备401、402、403和服务器405之间提供通信链路的介质。网络404可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备401、402、403通过网络404与服务器405交互，以接收或发送消息等。终端设备401、402、403上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。

终端设备401、402、403可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器405可以是提供各种服务的服务器，例如对用户利用终端设备401、402、403所浏览的购物类网站提供支持的后台管理服务器。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理，并将处理结果(例如产品信息)反馈给终端设备。

需要说明的是，本发明实施例所提供的多任务的执行方法可由终端设备401、402、403或服务器405执行，相应地，多任务的执行装置可以设置于终端设备401、402、403或服务器405中。

应该理解，图4中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

下面参考图5，其示出了适于用来实现本申请实施例的终端设备或服务器的计算机系统500的结构示意图。图5示出的终端设备或服务器仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。

如图5所示，计算机系统500包括中央处理单元(cpu)501，其可以根据存储在只读存储器(rom)502中的程序或者从存储部分508加载到随机访问存储器(ram)503中的程序而执行各种适当的动作和处理。在ram503中，还存储有系统500操作所需的各种程序和数据。cpu501、rom502以及ram503通过总线504彼此相连。输入/输出(i/o)接口505也连接至总线504。

以下部件连接至i/o接口505：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(crt)、液晶显示器(lcd)等以及扬声器等的输出部分507；包括硬盘等的存储部分508；以及包括诸如lan卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至i/o接口505。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便于从其上读出的计算机程序根据需要被安装入存储部分508。

特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(cpu)501执行时，执行本申请的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、rf等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：一种处理器包括生成模块301、运行模块302、重试模块303。其中，这些模块的名称在某种情况下并不构成对该模块本身的限定，例如，生成模块301还可以被描述为“用于根据任务信息生成执行单元对象集合的模块”。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备包括：根据任务信息生成执行单元对象集合，所述执行单元对象集合包括用于执行任务的执行单元对象；运行所述执行单元对象集合中的执行单元对象以便执行任务，并根据执行单元对象的对象特性捕获运行异常的执行单元对象；重试所述运行异常的执行单元对象，以便重新执行相应的任务。

根据本发明实施例的技术方案，根据任务信息生成执行单元对象集合，执行单元对象集合包括用于执行任务的执行单元对象；运行执行单元对象集合中的执行单元对象以便执行任务，并根据执行单元对象的对象特性捕获运行异常的执行单元对象；重试运行异常的执行单元对象，以便重新执行相应的任务。能够优化多任务执行的异常处理机制，及时捕获异常，有效规避失败情况的发生，降低出错几率，大大减少人工干预和运维维护成本。通过自定义的执行单元对象处理类将执行单元对象的运行状态信息存储在相应的执行单元对象的对象特性中，使得可以自动并及时捕获运行异常的执行单元对象；预先设定执行单元对象集合的可重试次数，可重试次数可以根据系统和环境的实际情况灵活配置，最大限度地保证多线程任务正常执行，尽可能减少人工干预和维护成本。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。