技术特征:
技术总结
本申请提供一种数据处理方法,所述方法包括:将待处理的数据文件分成多个数据块;根据第一映射关系将所述多个数据块存储到相应的目标数据服务器上;其中,所述第一映射关系是数据块与目标数据服务器之间的映射关系;当对所述数据文件进行处理时,根据所述第一映射关系,从相应的目标数据服务器上获取所述多个数据块,根据第二映射关系将所述多个数据块分配给相应的计算服务器进行处理;其中,所述第二映射关系是数据块与计算服务器之间的映射关系;所述计算服务器根据预设的模型处理相应的数据块;将所述多个数据块的处理结果合并。通过上述技术方案,可以提高数据存储和计算的时效性。
技术研发人员:杨吉东
受保护的技术使用者:郑州云海信息技术有限公司
技术研发日:2018.09.29
技术公布日:2019.01.18