技术总结
本发明涉及数据处理领域，尤其涉及一种数据处理方法及装置，用以减轻SQL on hadoop系统中数据分布不均匀的问题。该方法为主要应用于SQL on hadoop系统，SQL服务器获取Hadoop系统中至少一个数据节点分配待处理文件的文件分配结果，根据文件分配结果从至少一个数据节点中确定至少一个待调度数据节点，确定与至少一个待调度数据节点中每个待调度数据节点相对应的目标数据节点集合，并向至少一个目标数据节点集合中的目标数据节点发送第一调度指示。因此，采用该方法能够将待调度数据节点的处理负荷分担至目标数据节点，减轻SQL on hadoop系统中数据分布不均匀的问题，提升系统性能。
技术研发人员：董亚辉;刘海龙
受保护的技术使用者：华为技术有限公司
文档号码：201610124715
技术研发日：2016.03.04
技术公布日：2017.09.12