一种文件更新方法及装置的制造方法
【技术领域】
[0001]本发明涉及配置文件更新技术领域，尤其涉及一种文件更新方法及装置。
【背景技术】
[0002]随着网络和文化事业的发展，音视频资源极大丰富，对音视频文件的处理的需要也快速增长。
[0003]音视频文件处理的大致流程如下:首先将需处理的音视频文件解封装成为视频帧序列和音频帧序列；然后将视频帧序列和音频帧序列分别解码为RAW格式和PCM格式数据；对RAW格式和PCM格式数据进行处理；再将RAW格式和PCM格式的数据编码为所需格式的音频帧序列和视频帧序列；最后将音频帧序列和视频帧序列封装成需要的文件格式。
[0004]以上处理是通过计算机或计算机构成的数据处理装置来完成的，现有的这些计算机或数据处理装置是依靠本机的软硬件资源来实现对文件的处理。音视频文件处理的计算量庞大，对处理装置的运算能力和存储资源消耗很大，而且随着高清音视频文件的日益增多和处理需求的不断增大，依靠单机进行音视频文件处理的瓶颈问题日益突出，单机处理速度慢且容易发生系统崩溃。即使用户使用配置很高的计算机也难以保证处理的速度和稳定程度，尤其无法满足大批量和时间要求很高的处理任务。
[0005]鉴于现有技术中存在的以上问题，提供了一种分布式处理系统，使用多台计算机或处理装置来实现并行处理，并通过本发明的任文件更新方法为分布式处理系统中的各个装置进行配置文件更新，从而大大减少了处理所需的时间，同时降低了系统的处理压力，减少了系统崩溃的可能性。
【发明内容】
[0006]本发明实施例提供一种文件更新方法及装置，包括如下技术方案:
[0007]根据本发明实施例的第一方面，提供一种文件更新方法，用于分布式处理系统中的调度装置，所述分布式处理系统包括多个处理装置，所述文件更新方法包括:
[0008]存储所述分布式处理系统的系统配置文件，其中，所述配置文件包括所述调度装置和所述多个处理装置的配置信息；
[0009]按照预设时间间隔，判断所述系统配置文件是否有更新；
[0010]当判断所述系统配置文件有更新时，发送更新后的系统配置文件至每个处理模块；
[0011]控制每个处理模块根据所述更新后的系统配置文件检查与其相关的配置信息是否发生变化，并在发生变化时，根据更新后的系统配置文件重新进行初始化操作。
[0012]在一个实施例中，与处理模块相关的配置信息包括处理模块本身的配置信息以及与处理模块有连接关系的其他处理模块的配置信息。
[0013]在一个实施例中，所述系统配置文件包括所述每个处理模块对应的IP地址、端口、线程数和监视目录的路径。
[0014]在一个实施例中，所述判断所述系统配置文件是否有更新，包括:
[0015]判断所述系统配置文件的文件大小、文件修改日期和/或文件MD5值校验是否有变化；
[0016]当判断结果为有变化时，判断所述系统配置文件有更新；
[0017]当判断结果为没有变化时，判断所述系统配置文件没有更新。
[0018]在一个实施例中，所述方法还包括:
[0019]接收输入的系统配置文件更新命令；
[0020]根据所述系统配置文件更新命令更新所述系统配置文件；或者
[0021]接收新的处理模块发送的加入所述分布式处理系统的注册信息；
[0022]根据所述注册信息更新所述系统配置文件。
[0023]根据本发明实施例的第二方面，提供一种文件更新装置，用于分布式处理系统中的调度装置，所述分布式处理系统还包括多个处理装置，所述文件更新装置包括:
[0024]存储模块，用于存储所述分布式处理系统的系统配置文件，其中，所述配置文件包括所述调度装置和所述多个处理装置的配置信息；
[0025]判断模块，用于按照预设时间间隔，判断所述系统配置文件是否有更新；
[0026]发送模块，用于当判断所述系统配置文件有更新时，发送更新后的系统配置文件至每个处理模块；
[0027]处理模块，用于控制每个处理模块根据所述更新后的系统配置文件检查与其相关的配置信息是否发生变化，并在发生变化时，根据更新后的系统配置文件重新进行初始化操作。
[0028]在一个实施例中，与处理模块相关的配置信息包括处理模块本身的配置信息以及与处理模块有连接关系的其他处理模块的配置信息。
[0029]在一个实施例中，所述系统配置文件包括所述每个处理模块对应的IP地址、端口、线程数和监视目录的路径。
[0030]在一个实施例中，所述判断模块包括:
[0031]第一判断子模块，用于判断所述系统配置文件的文件大小、文件修改日期和/或文件MD5值校验是否有变化；
[0032]第二判断子模块，用于当判断结果为有变化时，判断所述系统配置文件有更新；
[0033]第三判断子模块，用于当判断结果为没有变化时，判断所述系统配置文件没有更新。
[0034]在一个实施例中，所述装置还包括:
[0035]第一接收模块，用于接收输入的系统配置文件更新命令；
[0036]第一更新模块，用于根据所述系统配置文件更新命令更新所述系统配置文件；或者
[0037]第二接收模块，用于接收新的处理模块发送的加入所述分布式处理系统的注册信息;
[0038]第二更新模块，用于根据所述注册信息更新所述系统配置文件。
[0039]本发明的实施例提供的技术方案可以包括以下有益效果:
[0040]上述技术方案，通过分布式处理系统中的调度装置存储系统配置文件，并定期检查系统配置文件是否有更新，在有更新时，发送更新后的系统配置文件至系统中的每个处理模块，从而使得各个处理模块都能够及时获取到最新的系统配置文件，根据最新的系统配置文件进行初始化，执行任务等操作。
[0041]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。
【附图说明】
[0042]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
[0043]图1是根据一示例性实施例示出的文件更新方法的流程图。
[0044]图2是根据一示例性实施例示出的文件更新方法中步骤S102的流程图。
[0045]图3A是根据一示例性实施例示出的另一种文件更新方法的流程图。
[0046]图3B是根据一示例性实施例示出的再一种文件更新方法的流程图。
[0047]图4是根据一示例性实施例示出的文件更新装置的框图。
[0048]图5是根据一示例性实施例示出的文件更新装置中判断模块的框图。
[0049]图6是根据一示例性实施例示出的另一种文件更新装置的框图。
[0050]图7是根据一示例性实施例示出的再一种文件更新装置的框图。
【具体实施方式】
[0051]这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
[0052]分布式处理系统包括:调度装置(dispatcher)和多个处理装置，其中，多个处理装置包括:任务打散装置(ingress)、第一传输装置(offer)、多个音频处理装置(AP)、多个视频处理装置(VP)、第二传输装置(offer)、输出装置egress和监视装置Watcher，其中，在每个装置中均设置有监控装置Monitor，不同的装置之间，通过监控装置进行交互。下面详细说明个装置:
[0053]调度装置获得视频数据，然后分给任务打散装置。
[0054]任务打散装置将视频数据打散，得到音频文件(。goa)、视频文件(。gop)、音频总数信息、视频总数信息，对音频文件和视频文件进行解封装，得到多个视频文件碎片和多个音频文件碎片。其中，对于音频文件碎片，可以每10分钟作为一段(不是整分钟，有出入)对于视频文件碎片，可以每分钟为一段(不是整分钟，有出入)。
[0055]第一传输装置用于将不同的打散碎片传输给相应的音频或视频处理装置进行处理。
[0056]音频处理装置用于处理音频文件碎片，包括对音频文件碎片进行解码，进行图像处理，对处理后的图像进行编码。第一传输装置将音频总数信息传输给音频处理装置，但是音频处理装置不处理，音频处理装置转发给输出装置Egress。
[0057]同理，视频处理装置用于处理视频文件碎片。
[0058]第二传输装置用于将音频处理装置和视频处理装置处理得到的数据传输给输出装置 egress。
[0059]输出装置Egress用于根据音频总数信息和视频总数信息对音频处理装置和视频处理装置处理后得到的数据进行汇总。
[0060]监视装置Watcher提供客户端查询数据的接口，与调度装置(dispatcher)连接。监视装置Watcher与调度装置(dispatcher)通过共享内存共享信息。
[0061]监控装置Monitor，负责信息的接收和汇总，与调度装置(dispatcher)连接。调度装置通过各装置中的监控装置监控其任务的状态，进而可以根据其任务的状态为其分发任务。
[0062]本发明实施例提供了一种文件更新方法，该方法可用于分布式处理系统的调度装置，如图1所示，该方法包括步骤S101-S104:
[0063]在步骤SlOl中，存储分布式处理系统的系统配置文件，其中，配置文件包括调度装置和多个处理装置的配置信息；
[0064]在步骤S102中，按照预设时间间隔，判断系统配置文件是否有更新；
[0065]在步骤S103中，当判断系统配置文件有更新时，发送更新后的系统配置文件至每个处理模块；
[0066]在步骤S104中，控制每个处理模块根据更新后的系统配置文件检查与其相关的配置信息是否发生变化，并在发生变化时，根据更新后的系统配置文件重新进行初始化操作。
[0067]在该实施例中，通过分布式处理系统中的调度装置存储系统配置文件，并定期检查系统配置文件是否有更新，在有更新时，发送更新后的系统配置文件至系统中的每个处理模块，从而使得各个处理模块都能够及时获取到最新的系统配置文件，根据最新的系统配置文件进行初始化，执行任务等操作，从而减少了处理所需的时间，同时降低了系统的处理压力，减少了系统崩溃的可能性。
[0068]在一个实施例中，与处理模块相关的配置信息包括处理模块本身的配置信息以及与处理模块有连接关系的其他处理模块的配置信息。
[0069]