数据处理方法及相关装置与流程

本申请涉及数据处理，具体涉及一种数据处理方法及相关装置。

背景技术：

1、随着传统金融领域，例如：券商、银行、保险等行业，开始不断向互联网发展和转变，越来越多的券商开始做数字化转型。利用多年积累的行业数据，打造符合自身的大数据平台，同时在此基础上开始数据的探索及应用。在券商领域，每个展业人员可能同时需要服务成百上千的客户，在有限的精力下，如何提高服务人员的服务效率，适应多元化的业务诉求成为本方案的核心诉求。目前常见的方式主要是：基于大数据模型来挖掘潜在客户，辅助展业，而模型训练的难易程度、结合业务场景的多样性均会影响最终客户数据分析的效率，进而影响客户服务质量。如何有效地提供一个完整的数据处理和分析流程，实现快速地客户分析和提供优质的客户服务，是当前亟待解决的问题。

2、因此，亟需一种数据处理方法解决上述问题。

技术实现思路

1、本申请实施例提供了一种数据处理方法及相关装置，可通过对不同类型的海量数据流进行分析计算后，形成客户线索数据，再按分发规则实时匹配分发到对应的终端设备供用户利用并进行客户服务，最终保证了客户数据处理的高效性，提供更低延时、更高效率、更优的客户服务。

2、第一方面，本申请实施例提供一种数据处理方法，应用于服务器，包括：

3、基于目标调度框架创建调度任务；

4、根据所述调度任务进行规则配置，得到目标规则；

5、根据所述目标规则从目标数据源中加载所述线索数据，并对所述线索数据进行预处理和转换，得到目标数据表；

6、动态提交所述目标数据表至数据集群组件中以执行数据计算任务，得到结果报文；

7、对所述结果报文进行格式转换，得到目标结果数据；

8、将所述目标结果数据存入目标主题数据库中，并基于数据分发规则信息，将所述目标结果数据分发至目标终端。

9、第二方面，本申请实施例提供一种数据处理装置，应用于服务器，所述装置包括创建单元、配置单元和处理单元；其中，

10、所述创建单元，用于基于目标调度框架创建调度任务；

11、所述配置单元，用于根据所述调度任务进行规则配置，得到目标规则；

12、所述处理单元，用于根据所述目标规则从目标数据源中加载所述线索数据，并对所述线索数据进行预处理和转换，得到目标数据表；

13、所述处理单元，还用于动态提交所述目标数据表至数据集群组件中以执行数据计算任务，得到结果报文；

14、所述处理单元，还用于对所述结果报文进行格式转换，得到目标结果数据；

15、所述处理单元，还用于将所述目标结果数据存入目标主题数据库中，并基于数据分发规则信息，将所述目标结果数据分发至目标终端。

16、第三方面，本申请实施例提供一种服务器，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。

17、第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。

18、第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。

19、可以看出，本申请实施例中，基于目标调度框架创建调度任务；根据调度任务进行规则配置，得到目标规则；根据目标规则从目标数据源中加载线索数据，并对线索数据进行预处理和转换，得到目标数据表；动态提交目标数据表至数据集群组件中以执行数据计算任务，得到结果报文；对结果报文进行格式转换，得到目标结果数据；将目标结果数据存入目标主题数据库中，并基于数据分发规则信息，将目标结果数据分发至目标终端。如此可以实现，对不同类型的海量数据流进行分析计算后，形成客户线索数据，再按分发规则实时匹配分发到对应的终端设备供用户利用并进行客户服务，最终保证了客户数据处理的高效性，提供更低延时、更高效率、更优的客户服务。

技术特征：

1.一种数据处理方法，其特征在于，应用于服务器，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述调度任务中包含用于指定线索数据的数据类型的信息，所述数据类型包括以下至少一种：实时数据类型和定时数据类型；

3.根据权利要求2所述的方法，其特征在于，所述为所述线索数据创建配置文件，包括：

4.根据权利要求2所述的方法，其特征在于，所述配置计算因子，包括：

5.根据权利要求2所述的方法，其特征在于，所述配置业务属性信息，包括：

6.根据权利要求5所述的方法，其特征在于，所述调度任务包括至少一个任务，每一所述任务对应一个目标结果数据；

7.根据权利要求6所述的方法，其特征在于，所述基于数据分发规则信息，将所述目标结果数据分发至目标终端，包括：

8.一种数据处理装置，其特征在于，应用于服务器，所述装置包括创建单元、配置单元和处理单元；其中，

9.一种服务器，其特征在于，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-7中任一项所述的方法中的步骤的指令。

10.一种计算机可读存储介质，其特征在于，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行如权利要求1-7中任一项所述的方法。

技术总结
本申请实施例公开了一种数据处理方法及相关装置，方法包括：基于目标调度框架创建调度任务；根据调度任务进行规则配置，得到目标规则；根据目标规则从目标数据源中加载线索数据，并对线索数据进行预处理和转换，得到目标数据表；动态提交目标数据表至数据集群组件中以执行数据计算任务，得到结果报文；对结果报文进行格式转换，得到目标结果数据；将目标结果数据存入目标主题数据库中，并基于数据分发规则信息，将目标结果数据分发至目标终端。如此可以实现，对海量的不同类型的数据流进行分析计算后，形成客户线索数据，再按分发规则实时匹配分发到对应的终端设备供用户使用并进行客户服务，提高数据的利用率以及提高客户服务的个性化和效率。

技术研发人员：熊伟,王美娟,陈雪琰,孔培
受保护的技术使用者：中国中金财富证券有限公司
技术研发日：
技术公布日：2024/1/16