批量文本的处理方法和装置与流程

1.本发明涉及文件传输技术领域，可用于金融领域，尤其涉及一种批量文本的处理方法和装置。


背景技术：

2.商业银行包含各种软件系统，各系统完成各自的业务功能。这些系统间存在大量的对实效性要求不高的非联机类交互，这类交易不要求即时处理，可采用批量文本的方式进行异步处理，进而提高系统和资源利用率。这些系统基于自身特性，业务报文的码制各自不同，如gbk、utf-8、utf-16、ebcd等，而银行的核心系统一般部署在主机上，码制为大多为ebcd。因业务需要，各系统与核心系统之间、各系统与各系统之间存在着大量的批量文本的交互。现有系统间的批量文本处理，对交互系统要求较高，除了要关注自身业务，还需要考虑与目的系统之间的码制差异，错误处理机制等因素；各交互系统分别要与目的系统进行适配，且适配后并不通用，再与其他目的系统交互时，需要再次进行适配，开发实施周期较长；各源系统分别与目的系统直接适配，对整个商业银行来说，一方面各系统多次适配开发导致代码复用率不高和开发工作量的浪费；另一方面交互成网状结构，不便于维护和管理监控。


技术实现要素：

3.有鉴于此，本发明提供一种批量文本的处理方法和装置，以解决上述提及的至少一个问题。
4.为了实现上述目的，本发明采用以下方案：
5.根据本发明的第一方面，提供一种批量文本的处理方法，所述方法由处于源系统和目标系统间的批量文本处理服务器执行，所述方法包括：根据预设配置定时扫描源系统的文本上传目录；响应于所述源系统的文本上传目录中有待传输的批量文本，根据源系统和目标系统对应的字符集将所述批量文本进行转码；将转码后的批量文本发送至一个或多个目标系统的文本下载目录，所述目标系统的文本下载目录存储在批量文本处理服务器中；通过文件推送的方式将文本下载目录中的批量文本传输给目标系统。
6.优选的，本发明实施例上述方法中文本上传目录存储于所述源系统中或所述批量文本处理服务器中，当所述文本上传目录存储于所述源系统中时，批量文本处理服务器通过扫描所述文本上传目录获取待传输的批量文本；当所述文本上传目录存储于所述批量文本处理服务器中时，所述源系统将所述待传输的批量文本上传至所述文本上传目录。
7.优选的，本发明实施例上述方法中响应于所述源系统的文本上传目录中有待传输的批量文本，所述方法还包括：将所述待传输的批量文本转储至源系统的备份目录中，所述源系统的备份目录存储在批量文本处理服务器中。
8.优选的，本发明实施例上述方法中根据源系统和目标系统对应的字符集将所述批量文本进行转码后，所述方法还包括：依据转码后的批量处理文本生成文本清单。
9.优选的，本发明实施例上述方法中响应于所述源系统的文本上传目录中有待传输的批量文本，所述方法还包括：判断所述待传输的批量文本的文件名是否合法；响应于所述文件名合法，则根据源系统和目标系统对应的字符集将所述批量文本进行转码；响应于所述文件名不合法，生成与所述待传输的批量文本相对应的错误文件，并将所述错误文件发送至源系统的文本下载目录中以便源系统获取到所述错误文件，所述源系统的文本下载目录存储在批量文本处理服务器中。
10.优选的，本发明实施例上述方法中响应于所述文件名合法，所述根据源系统和目标系统对应的字符集将所述批量文本进行转码包括：判断所述待传输的批量文本是否加密；响应于所述待传输的批量文本已经加密，则解密后再根据源系统和目标系统对应的字符集将所述批量文本进行转码；响应于所述待传输的批量文本未加密，则直接根据源系统和目标系统对应的字符集将所述批量文本进行转码。
11.优选的，本发明实施例上述方法中将转码后的批量文本发送至目标系统的文本下载目录包括：若批量文本经过解密后再进行的转码，则对转码后的批量文本进行加密后再发送至目标系统的文本下载目录，若批量文本转码前未经过解密，则直接将转码后的批量文本发送至目标系统的文本下载目录。
12.根据本发明的第二方面，提供一种批量文本的处理装置，所述装置设置在批量文本处理服务器中，所述批量文本处理服务器处于源系统和目标系统之间，所述处理装置包括：扫描单元，用于根据预设配置定时扫描源系统的文本上传目录；转码单元，用于响应于所述源系统的文本上传目录中有待传输的批量文本，根据源系统和目标系统对应的字符集将所述批量文本进行转码；文本发送单元，用于将转码后的批量文本发送至一个或多个目标系统的文本下载目录，所述目标系统的文本下载目录存储在批量文本处理服务器中；文本传输单元，用于通过文件推送的方式将文本下载目录中的批量文本传输给目标系统。
13.优选的，本发明实施例上述装置中文本上传目录存储于所述源系统中或所述批量文本处理服务器中，当所述文本上传目录存储于所述源系统中时，所述扫描单元通过扫描所述文本上传目录获取待传输的批量文本；当所述文本上传目录存储于所述批量文本处理服务器中时，所述源系统将所述待传输的批量文本上传至所述文本上传目录。
14.优选的，本发明实施例上述装置中响应于所述源系统的文本上传目录中有待传输的批量文本，所述处理装置还包括：备份单元，用于将所述待传输的批量文本转储至源系统的备份目录中，所述源系统的备份目录存储在批量文本处理服务器中。
15.优选的，本发明实施例上述装置中处理装置还包括：清单生成单元，用于在所述转码单元根据源系统和目标系统对应的字符集将所述批量文本进行转码后，依据转码后的批量处理文本生成文本清单。
16.优选的，本发明实施例上述装置中处理装置还包括：合法性判断单元，用于判断文本上传目录中的所述待传输的批量文本的文件名是否合法；错误文件生成单元，用于当所述待传输的批量文本的文件名不合法、或当所述转码单元转码失败时，生成与所述待传输的批量文本相对应的错误文件，并将所述错误文件发送至源系统的文本下载目录中以便源系统获取到所述错误文件，所述源系统的文本下载目录存储在批量文本处理服务器中。
17.优选的，本发明实施例上述装置中处理装置还包括：加密判断单元，用于当所述待传输的批量文本的文件名合法时，判断所述待传输的批量文本是否加密；加解密单元，用于
对批量文本进行加解密操作；响应于所述待传输的批量文本已经加密，则由所述加解密单元解密后再由所述转码单元根据源系统和目标系统对应的字符集将所述批量文本进行转码；响应于所述待传输的批量文本未加密，则由所述转码单元直接根据源系统和目标系统对应的字符集将所述批量文本进行转码。
18.优选的，本发明实施例上述装置中若批量文本经过所述加解密单元解密后再进行的转码，则由所述加解密单元对转码后的批量文本进行加密后再由所述文本发送单元发送至目标系统的文本下载目录，若批量文本转码前未经过所述加解密单元解密，则由所述文本发送单元直接将转码后的批量文本发送至目标系统的文本下载目录。
19.根据本发明的第三方面，提供一种电子设备，包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序，处理器执行所述计算机程序时实现上述方法的步骤。
20.根据本发明的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述方法的步骤。
21.根据本发明的第五方面，提供一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令被处理器执行时实现上述方法的步骤。
22.由上述技术方案可知，本技术提供的批量文本的处理方法和装置，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
附图说明
23.为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
24.图1是本技术提供的一种批量文本处理的系统结构示意图；
25.图2是本技术实施例提供的一种批量文本的处理方法的流程示意图；
26.图3是本技术另一实施例提供的一种批量文本的处理方法的流程示意图；
27.图4是本技术实施例提供的一种批量文本的处理装置的结构示意图；
28.图5是本技术另一实施例提供的一种批量文本的处理装置的结构示意图；
29.图6是本发明实施例提供的电子设备的示意图。
具体实施方式
30.为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。
31.如图1所示为本技术提供的一种批量文本处理的系统结构示意图，如图1所示，该系统可以包括源系统100、批量文本处理服务器200和目标系统300，其中批量文本处理服务器200分别和源系统100及目标系统300通信连接。在本实施例中源系统100即为批量文本传
输的发起方或上送方，其可以为银行核心系统或者银行外围系统，目标系统300为批量文本传输的接收方或返回方，其也可为银行核心系统或者银行外围系统，源系统100及目标系统300之间的批量文本传输通过批量文本处理服务器200来实现。
32.如图2所示为本技术实施例提供的一种批量文本的处理方法的流程示意图，本实施例是从该批量文本处理服务器200侧对本发明进行的描述，本方法包括如下步骤：
33.步骤s201：根据预设配置定时扫描源系统的文本上传目录。
34.在本实施例中，可以在文本处理服务器200内预先配置好各个系统的文本上传目录(upload)和文本下载目录(download)，源系统100可以先将需要传输的批量文本发送至自己的文本上传目录中，而文本处理服务器200可以配置成定时扫描所有系统的文本上传目录来查新是否有批量文本需要传输，比如每隔半小时进行一次扫描。
35.在本实施例中，在源系统100上传批量文本至自己的文本上传目录中时，可以设定相应的上传规则和文件命名规则，比如可以先上传后缀名为tmp的临时文件到文本上传目录中，当文件上传完毕后，改名成dat后缀名文件等。这可以提高扫描正确文件的效率，从而提升整体的文本处理效率。
36.当然，本实施例中的文本上传目录也可以位于源系统100中，文本处理服务器200通过定时扫描位于源系统100中的文本上传目录，来获取到其中的需要传输的批量文本。
37.步骤s202：响应于所述源系统的文本上传目录中有待传输的批量文本，根据源系统和目标系统对应的字符集将所述批量文本进行转码。
38.当通过步骤s201扫描后发现源系统的文本上传目录中存在待传输的批量文本后，文本处理服务器200会根据源系统和目标系统对应的字符集将所述批量文本进行转码，比如说，文本处理服务器200内比如可以维护一映射表，该映射表记录了源系统和目标系统所分别对应的码制，然后根据该映射表将批量文本的码制从源系统转换为目标系统的码制，从而将待传输的批量文本转换成目标系统可以识别的字符集。
39.当然，若源系统和目标系统间的码制相同，则本步骤可以无需进行文件的转码。
40.步骤s203：将转码后的批量文本发送至一个或多个目标系统的文本下载目录，所述目标系统的文本下载目录存储在批量文本处理服务器中。
41.步骤s204：通过文件推送的方式将文本下载目录中的批量文本传输给目标系统。
42.在本实施例中，文件推送是指将批量文本推送至外围系统的指定目录中。上述步骤s203将批量文本发送至多个目标系统的文本下载目录可以称之为信息发布，而将批量文本发送至一个目标系统的文本下载目录可以称之为文本转发，不论是文本转发还是信息发布，后续都支持以文件推送的方式将文本下载目录中的批量文本传输给目标系统。
43.在本实施例中，上述批量文本转码、将批量文本发送至文本下载目录、文件推送、信息发布等操作均为原子操作，这里的原子操作是指不会被线程调度机制打断的操作，原子操作一旦开始，就一直运行到结束，中间不会切换到另一个线程。
44.由上述技术方案可知，本技术提供的批量文本的处理方法，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
45.如图3所示为本技术实施例提供的另一种批量文本的处理方法的流程示意图，该
方法也是从该批量文本处理服务器200侧对本发明进行的描述，包括如下步骤：
46.步骤s301：根据预设配置定时扫描源系统的文本上传目录。
47.步骤s302：判断源系统的文本上传目录中是否有待传输的批量文本，若有，则进入步骤s303，否则返回步骤s301。
48.在本实施例中，批量文本处理服务器200是定时对所有系统的文本上传目录进行扫描，当某个系统对应的文本上传目录中具有批量文本时，该系统即为源系统。
49.步骤s303：将所述待传输的批量文本转储至源系统的备份目录中，所述源系统的备份目录存储在批量文本处理服务器中。
50.优选的，在扫描到具有待传输的批量文本时，首先可以确认该批量文本的文本类型，然后根据该文本类型确定是否需要进行文件备份。
51.步骤s304：判断待传输的批量文本的文件名是否合法，若合法，则进入步骤s306，否则进入步骤s305。
52.步骤s305：生成与所述待传输的批量文本相对应的错误文件，并将所述错误文件发送至源系统的文本下载目录中以便源系统获取到所述错误文件，所述源系统的文本下载目录存储在批量文本处理服务器中。
53.需要指出的是，本实施例中除了当发现待传输文本的文件名不合法时生成错误文件外，当整个批量文本的处理过程中出现错误时，都可以生成相应的错误文件，比如转码失败，发现源系统100上传的文件命名错误，或者源系统100直接上传了dat文件，但该文件并未传输完毕等。
54.可见，各系统的文本下载目录不但可以存放其他源系统发送过来的批量文本，还可以存放自身作为源系统来发送批量文本时的出错文件。各系统可以根据设定从位于批量文本处理服务器中的文本下载目录获取需要的批量文本或出错文件。
55.步骤s306：判断所述待传输的批量文本是否加密，若已经加密，则进入步骤s308，否则进入步骤s307。
56.步骤s307：根据源系统和目标系统对应的字符集将所述批量文本进行转码，并进入步骤s310。
57.步骤s308：对加密的批量文本解密后再根据源系统和目标系统对应的字符集将所述批量文本进行转码。
58.步骤s309：对转码后的批量文本进行加密。
59.需要指出的是，这里的加密算法或秘钥需要和源系统发出的加密算法或秘钥相同。
60.步骤s310：将转码后的批量文本发送至目标系统的文本下载目录。
61.步骤s311：判断是否存在批量处理文本的文本清单，若不存在，则进入步骤s312，否则进入步骤s313。
62.步骤s312：依据转码后的批量处理文本生成文本清单。
63.在本实施例中，通过生成文本清单，一方面，当有的系统例如主机系统，取文本时不便于遍历时，可考虑通过文本清单来获取文本；另一方面，如果目录中文本很多，有的文本可能已取过，有的还未取，且已取过的也尚未清理，也可通过文本清单快速获取新文本。
64.步骤s313：在批量处理文本对应的文本清单内增加一条记录。
65.步骤s314：通过文件推送或信息发布的方式将文本下载目录中的批量文本传输给目标系统。
66.由上述技术方案可知，本技术提供的批量文本的处理方法，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
67.如图4所示为本技术实施例提供的一种批量文本的处理装置的结构示意图，该装置包括：扫描单元410、转码单元420、文本发送单元430和文本传输单元440，它们之间依次相连。该装置设置在批量文本处理服务器中，而批量文本处理服务器处于源系统和目标系统之间。
68.扫描单元410用于根据预设配置定时扫描源系统的文本上传目录。
69.优选的，上述文本上传目录存储于所述源系统中或所述批量文本处理服务器中，当所述文本上传目录存储于所述源系统中时，所述扫描单元410通过扫描所述文本上传目录获取待传输的批量文本；当所述文本上传目录存储于所述批量文本处理服务器中时，所述源系统将所述待传输的批量文本上传至所述文本上传目录。
70.转码单元420用于响应于所述源系统的文本上传目录中有待传输的批量文本，根据源系统和目标系统对应的字符集将所述批量文本进行转码。
71.文本发送单元430用于将转码后的批量文本发送至一个或多个目标系统的文本下载目录，所述目标系统的文本下载目录存储在批量文本处理服务器中。
72.文本传输单元440用于通过文件推送的方式将文本下载目录中的批量文本传输给目标系统。
73.上述各单元的详细描述可以参见图2对应的方法实施例中相应描述，在此不再继续赘述。
74.由上述技术方案可知，本技术提供的批量文本的处理装置，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
75.如图5所示为本技术实施例提供的另一种批量文本的处理装置的结构示意图，该装置包括：扫描单元510、备份单元520、合法性判断单元530、错误文件生成单元540、加密判断单元550、加解密单元560、转码单元570、文本发送单元580、清单生成单元590和文本传输单元600。
76.扫描单元510用于根据预设配置定时扫描源系统的文本上传目录。
77.备份单元520用于将所述待传输的批量文本转储至源系统的备份目录中，所述源系统的备份目录存储在批量文本处理服务器中。
78.合法性判断单元530用于判断文本上传目录中的所述待传输的批量文本的文件名是否合法。
79.错误文件生成单元540用于当合法性判断单元530判断所述待传输的批量文本的文件名不合法时，生成与所述待传输的批量文本相对应的错误文件，并将所述错误文件发送至源系统的文本下载目录中以便源系统获取到所述错误文件，所述源系统的文本下载目
录存储在批量文本处理服务器中。
80.需要指出的是，本实施例中错误文件生成单元540除了当发现待传输文本的文件名不合法时生成错误文件外，当整个批量文本的处理过程中出现错误时，都可以生成相应的错误文件，比如转码单元560转码失败，发现源系统100上传的文件命名错误，或者源系统100直接上传了dat文件，但该文件并未传输完毕等。
81.加密判断单元550用于当合法性判断单元530判断所述待传输的批量文本的文件名合法时，判断所述待传输的批量文本是否加密。
82.加解密单元560用于对批量文本进行加解密操作。
83.响应于待传输的批量文本已经加密，则由加解密单元560解密后再由转码单元570根据源系统和目标系统对应的字符集将所述批量文本进行转码；响应于待传输的批量文本未加密，则由转码单元570直接根据源系统和目标系统对应的字符集将所述批量文本进行转码。若批量文本经过加解密单元560解密后再进行的转码，则由加解密单元560对转码后的批量文本进行加密后再由文本发送单元580发送至目标系统的文本下载目录，若批量文本转码前未经过所述加解密单元560解密，则由文本发送单元580直接将转码后的批量文本发送至目标系统的文本下载目录。
84.清单生成单元590用于在所述转码单元根据源系统和目标系统对应的字符集将所述批量文本进行转码后，且文本发送单元580将转码后的批量文本发送至目标系统的文本下载目录后，依据转码后的批量处理文本生成文本清单。
85.文本传输单元600用于通过文件推送的方式将文本下载目录中的批量文本传输给目标系统。
86.上述各单元的详细描述可以参见图3对应的方法实施例中相应描述，在此不再继续赘述。
87.由上述技术方案可知，本技术提供的批量文本的处理装置，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
88.图6是本发明实施例提供的电子设备的示意图。图6所示的电子设备为通用数据处理装置，其包括通用的计算机硬件结构，其至少包括处理器501和存储器502。处理器501和存储器502通过总线503连接。存储器502适于存储处理器501可执行的一条或多条指令或程序。该一条或多条指令或程序被处理器501执行以实现上述批量文本的处理方法中的步骤。
89.上述处理器501可以是独立的微处理器，也可以是一个或者多个微处理器集合。由此，处理器501通过执行存储器502所存储的命令，从而执行如上所述的本发明实施例的方法流程实现对于数据的处理和对于其他装置的控制。总线503将上述多个组件连接在一起，同时将上述组件连接到显示控制器504和显示装置以及输入/输出(i/o)装置505。输入/输出(i/o)装置505可以是鼠标、键盘、调制解调器、网络接口、触控输入装置、体感输入装置、打印机以及本领域公知的其他装置。典型地，输入/输出(i/o)装置505通过输入/输出(i/o)控制器506与系统相连。
90.其中，存储器502可以存储软件组件，例如操作系统、通信模块、交互模块以及应用程序。以上所述的每个模块和应用程序都对应于完成一个或多个功能和在发明实施例中描
述的方法的一组可执行程序指令。
91.本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时以实现上述批量文本的处理方法的步骤。
92.本发明实施例还提供一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令被处理器执行时实现上述批量文本的处理方法的步骤。
93.综上所述，本技术提供的批量文本的处理方法和装置，各系统仅需关注自身业务，源系统按自身码制上送批量文本，目的系统按自身码制处理文本，无需考虑码制差异等节省了开发成本。本发明仅需根据具体的文本处理需求通过参数化配置组合原子操作即可完成文本处理流程，实现源系统与目的系统之间的文本交互，开发高效简单快捷。
94.以上参照附图描述了本发明的优选实施方式。这些实施方式的许多特征和优点根据该详细的说明书是清楚的，因此权利要求旨在覆盖这些实施方式的落入其真实精神和范围内的所有这些特征和优点。此外，由于本领域的技术人员容易想到很多修改和改变，因此不是要将本发明的实施方式限于所例示和描述的精确结构和操作，而是可以涵盖落入其范围内的所有合适修改和等同物。
95.本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
96.本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
97.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
98.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
99.以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。