技术总结
本发明公开了一种基于分库分表的任务传输方法、装置及系统。其中，该方法包括：从分库分表中抽取待传输的任务集合，其中，任务集合包括：多个分库，以及每个分库所包含的分表；按照预先配置的总并发粒度从多个分库中调取n个分表，n等于总并发粒度；将调取到的n个分表采用散列分配方式散列至不同的调度单元，其中，预先配置每个调度单元的单元并发粒度相同；将每个调度单元中包含的分表按照单元并发粒度并发传输至目标位置。本发明解决了现有技术中在基于分库分表的任务进行并发传输时，抽取端从分库分表DB中并发读取数据压力过大，导致并发传输分库分表的任务效率低的技术问题。
技术研发人员：洪鲛
受保护的技术使用者：阿里巴巴集团控股有限公司
文档号码：201510888403
技术研发日：2015.12.07
技术公布日：2017.06.13