技术特征:
技术总结
本申请公开了一种基于硬件排序MapReduce的数据处理方法。该方法包括:将基于CPU的快速排序替换为基于GPU的快速排序;将基于CPU的归并排序替换为基于GPU的归并排序;将基于CPU的堆排序均替换为基于GPU的归并排序。用基于GPU的排序算法替代基于CPU的排序算法,充分利用GPU的强大计算能力,提高中间数据处理速度,进而提升MapReduce性能,该方法尤其适用于大数据领域。
技术研发人员:计晓斐;李建波;刘亮
受保护的技术使用者:青岛蓝云信息技术有限公司
技术研发日:2017.04.13
技术公布日:2017.08.29