数据处理系统、方法及计算机装置与流程

本发明涉及数据处理领域，尤其涉及一种数据处理系统、方法及计算机装置。

背景技术：

1、随着电商逐渐普及于大众生活，越来越多的用户趋向于网上购物。其中抖音电商也逐渐成为电商主流的一部分。随着用户通过抖音电商购买商品的增多，抖音商家需要处理的数据也越来越多，尤其是对于一些销售产品种类较多的电商企业来说，需要处理的数据量庞大。

2、传统地，大多数抖音商家选用一些成熟的软件去管控这些数据，如商品信息、订单信息等。而当抖音商家在和厂商核对时，就需要对这些数据进行集中整理，以得到一份符合厂商要求的数据表单。而不同的厂商对需要的数据以及数据要求是不同的。比如有些厂商需要反馈的数据中包含商品的单日销售数量，而不要求有月销售数量，而有些厂商需要反馈的数据中包含商品的单日销售数量，也要包含商品的约销售数量。

3、现有的软件在处理这类问题时，通常是设置数据导入或导出的模版，用户可以根据预先设置好的模版进行数据的导入或导出。但是，这些模版无法个性化地适用于不同的厂商。

4、此外，用户在设置模版时，模版中出现的数据可能会有所重复，比如说单日数据和每周的数据，其中每周的数据中就包含有单日的数据。但是由于用户在设置模版时，存在误操作而导致模版中要求出现这些重复的数据，这样一来，就会导致数据导入或导出的效率大大地降低。

技术实现思路

1、本发明的一个优势在于提供一种数据处理系统、方法及计算机装置，其中通过所述数据处理方法能够根据不同的厂商要求，自动地形成个性化的模版，从而是用户得到对应符合供应商要求的数据。

2、本发明的另一个优势在于提供一种数据处理系统、方法及计算机装置，其中通过所述数据处理方法能够自动地对所述数据模版中的数据归属进行相似性判断，从而能够使得在导出数据时，去除导出数据中冗余的数据，进而使得数据的导出或导入能够更加地迅速。

3、本发明的另一优势在于提供一种数据处理系统、方法及计算机装置，其中通过所述数据处理方法在导出或导入数据时，可以通过异步处理的方式对数据进行处理，从而有效地防止数据丢失和重复的导入或导出数据。

4、为到达以上至少一个优势，本发明提供一种数据处理方法，所述数据处理方法包括：

5、采集导出和/或导入的每个厂商的数据；

6、计算每个厂商同种业务类型的数据下，每种数据归属在导入或导出的数据中出现的次数和/或频率，将出现次数和/或频率低于一预设阈值的数据归属记作非计入数据模版的数据归属，而将出现次数和/或频率高于一预设阈值的数据归属记作计入所述数据模版的数据归属；

7、将所有计入所述数据模版的所述数据归属确定为一显示策略，而将所有非计入所述数据模版的所述数据归属确定为一非显示策略，并将所述显示策略和所述非显示策略定义为所述厂商的数据归类方式；

8、根据每个所述厂商的数据归类方式和一预设模版和所述显示策略和非显示策略，自动地调整所述预设模版。

9、根据本发明一实施例，采集的每个厂商的数据被设置为预定时长内导出和/或导入的数据。

10、根据本发明一实施例，根据采集的用户设定的所述预设模版，响应用户设定所述预设模版中必须显示的数据归属有关操作信号，形成必须在所述预设模版上显示的数据归属的显示模版策略和可被调整的数据归属有关的非显示模版策略。

11、根据本发明一实施例，所述数据处理方法还包括以下步骤：

12、采集每个厂商每种数据类型的所有所述数据模版；

13、判断每种数据类型中所述数据模版中所述数据归属之间的相似性；

14、屏蔽所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属，以形成调整后的所述数据模版。

15、根据本发明一实施例，屏蔽所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属，以形成调整后的所述数据模版包括：

16、隐藏所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属。

17、根据本发明一实施例，屏蔽所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属，以形成调整后的所述数据模版包括：

18、删除所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属。

19、根据本发明一实施例，判断每种数据类型中所述数据模版中所述数据归属之间的相似性，包括：

20、采集经由同一厂商对应所述数据类型的所述数据模版导出和/或导入的数据；

21、通过语义分析的方式确定同一厂商对应所述数据类型的所述数据模版中所述数据归属之间的相似性；

22、判断通过语义分析的方式确定同一厂商对应所述数据类型的所述数据模版中所述数据归属之间的相似性高的至少两个所述数据归属同时出现在同一厂商对应所述数据类型的所述数据模版导出和/或导入的数据中的次数和/或频率，当所述数据归属之间相似性高的至少两个所述数据归属同时出现在同一厂商对应所述数据类型的所述数据模版导出和/或导入的数据中的和/或频率超过预设值时，则确定所述数据归属之间相似性较低；反之则较高。

23、根据本发明的一个方面，为达到上述目的，本发明提供一种数据处理系统，所述数据处理系统包括：

24、数据采集模块，其中所述数据采集模块被设置采集导出和/或导入给每个厂商的数据；

25、数据处理模块，其中所述数据处理模块被设置计算每个厂商同种业务类型的数据下，每种数据归属在导入或导出的数据中出现的次数和/或频率，将出现次数和/或频率低于一预设阈值的数据归属记作非计入数据模版的数据归属，而将出现次数和/或频率高于一预设阈值的数据归属记作计入所述数据模版的数据归属；将所有计入所述数据模版的所述数据归属确定为一显示策略，而将所有非计入所述数据模版的所述数据归属确定为一非显示策略，并将所述显示策略和所述非显示策略定义为所述厂商的数据归类方式；和

26、执行模块，其中所述输出模块被设置根据每个所述厂商的数据归类方式和一预设模版和所述显示策略和非显示策略，自动地调整所述预设模版。

27、根据本发明的一个方面，为达到上述目的，本发明提供一种存储介质，存储有计算机程序，当所述计算机程序被执行时，使得其执行上述任一所述数据处理方法。

28、根据本发明的一个方面，为达到上述目的，本发明提供一种计算机装置，所述计算机装置包括一个或多个处理器和存储介质，其中所述存储介质被可通信地连接于所述处理器，并且所述处理器被设置能够执行上述任一所述数据处理方法。

技术特征：

1.数据处理方法，其特征在于，所述数据处理方法包括：

2.根据权利要求1所述数据处理方法，其特征在于，采集的每个厂商的数据被设置为预定时长内导出和/或导入的数据。

3.根据权利要求1或2所述数据处理方法，其特征在于，根据采集的用户设定的所述预设模版，响应用户设定所述预设模版中必须显示的数据归属有关操作信号，形成必须在所述预设模版上显示的数据归属的显示模版策略和可被调整的数据归属有关的非显示模版策略。

4.根据权利要求1或2所述数据处理方法，其特征在于，所述数据处理方法还包括以下步骤：

5.根据权利要求4所述数据处理方法，其特征在于，其中，屏蔽所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属，以形成调整后的所述数据模版包括：

6.根据权利要求4所述数据处理方法，其特征在于，其中，屏蔽所述数据模版中，所述数据归属的相似性较高的至少两个数据归属中的至少一个，而显示所述数据模版中所述数据归属的相似性较低的所述数据归属，以形成调整后的所述数据模版包括：

7.根据权利要求4所述数据处理方法，其特征在于，其中，判断每种数据类型中所述数据模版中所述数据归属之间的相似性，包括：

8.数据处理系统，其特征在于，所述数据处理系统包括：

9.存储介质，其特征在于，存储有计算机程序，当所述计算机程序被执行时，使得其执行上述权利要求1至7中任一所述数据处理方法。

10.计算机装置，其特征在于，所述计算机装置包括一个或多个处理器和存储介质，其中所述存储介质被可通信地连接于所述处理器，并且所述处理器被设置能够执行上述权利要求1至7中任一所述数据处理方法。

技术总结
本申请公开数据处理系统、方法及计算机装置，所述数据处理包括以下步骤：采集导出和/或导入给每个厂商的数据，并确定对应每个厂商的数据归类方式；并根据每个所述厂商的数据归类方式和一预设模版，自动地调整所述预设的数据模版，以为每个不同的所述厂商个性化地匹配所述数据模版。

技术研发人员：廖亮
受保护的技术使用者：杭州瀚斯科技有限公司
技术研发日：
技术公布日：2024/1/15