数据处理方法及装置与流程

技术特征：

技术总结
本发明公开了一种数据处理方法及装置。其中，该方法包括：从数据中清洗出目标数据，其中，目标数据包括报文形式的数据的字段和值；对多个目标数据进行去重处理；将去重后的多个目标数据，同时落地存储到多个表的存储文件中，且保证存储文件数量可控、大小均衡。本发明解决了相关技术中仅能对单个表的数据落地的方式，效率低的技术问题。

技术研发人员：殷苏娜;邢钦华;郑佰云
受保护的技术使用者：北京互金新融科技有限公司
技术研发日：2019.04.26
技术公布日：2019.09.06