图划分方法、装置及计算机可读存储介质与流程

文档序号:24160128发布日期:2021-03-05 15:37阅读:来源:国知局

技术特征:
1.一种图划分方法,其特征在于,包括:预先根据并行计算系统的各计算节点的计算性能按照预设度量机制确定图划分规则,以将待划分图数据成比例地分配至各计算节点;根据图顶点数和加载线程数确定各加载线程的数据读取范围,同时调用多个加载线程以顶点为单位并行读取所述待划分图数据,并将各加载线程读取的图顶点数据传递给相应的划分线程;基于当前时刻已经划分好的图数据、按照所述图划分规则确定各划分线程中每个图顶点数据所属子图,并基于子图与计算节点间的对应关系将各图顶点数据划分至相应计算节点。2.根据权利要求1所述的图划分方法,其特征在于,所述根据并行计算系统的各计算节点的计算性能按照预设度量机制确定图划分规则包括:根据所述并行计算系统的各计算节点的处理速度,调用比例计算关系式计算节点分配比例关系;根据所述节点分配比例关系按照预设度量机制计算各计算节点分配图数据的期望值;根据所述期望值和图数据分配实际值确定所述图划分规则;其中,所述比例计算关系式为:式中,k'为所述并行计算系统中计算节点总数,s
i
为第i个计算节点的处理速度,γ
k'
为第k'个计算节点的分配图数据的比例值。3.根据权利要求2所述的图划分方法,其特征在于,所述预设度量机制为图顶点个数,所述根据所述节点分配比例关系按照预设度量机制计算各计算节点分配图数据的期望值,并根据所述期望值确定所述图划分规则包括:根据所述待划分图的图顶点总数和所述节点分配比例关系计算各子图分配到图顶点个数的期望值;根据各子图的实际顶点数和相应的顶点数的期望值确定所述图划分规则。4.根据权利要求2所述的图划分方法,其特征在于,所述预设度量机制为图任务负载,所述根据所述节点分配比例关系按照预设度量机制计算各计算节点分配图数据的期望值包括:调用图任务负载计算关系式计算所述待划分图上执行图算法的图任务负载;根据所述图任务负载和所述节点分配比例关系计算各计算节点分配到的图任务负载的期望值;根据各计算节点上已分配子图对应的实际图任务负载和相应的图任务负载的期望值确定所述图划分规则;其中,所述图任务负载计算关系式为:load(g,alg)=a(|v|-r)
α
+b(|e|-s)
β
+clog((|v|-r)
·
(|e|-s)+1)+d;式中,load(g,alg)为所述图任务负载,|v|为所述待划分图的图顶点总数,|e|为所述待划分图的连接边总数,a、α、r、b、s、β、c、d为实数域的参数。
5.根据权利要求1至4任意一项所述的图划分方法,其特征在于,所述调用多个加载线程以顶点为单位并行读取待划分图数据包括:预先将待划分图按照邻接表的形式存储至存储磁盘阵列中;调用多个加载线程按照预设数据读取顺序以顶点为单位并行读取所述待划分图数据;其中,所述预设数据读取顺序为广度优先顺序或深度优先顺序或随机顺序;第i个加载线程读取所述邻接表中第行到第行的图数据,i∈[1,k],|v|为所述待划分图的顶点数,k为加载线程总数。6.根据权利要求5所述的图划分方法,其特征在于,所述基于当前时刻已经划分好的图数据,同时调用各划分线程按照所述图划分规则确定各顶点所属子图包括:预先为每个划分线程分配相应的缓冲区,以用于存储传递给相应划分线程的图顶点数据;对当前划分线程,若所述当前划分线程对应缓存区的剩余空间容量为0,基于当前时刻已经划分好的图数据,按照所述图划分规则将所述当前划分线程中的所有图顶点数据划分至相应子图中。7.根据权利要求6所述的图划分方法,其特征在于,所述基于子图与计算节点间的对应关系将各图顶点数据划分至相应计算节点之后,还包括:预先基于广义平衡偏斜因子、割边比和划分时间生成图划分结果评价标准;调用所述图划分结果评价标准生成当前图划分结果的分析报告;所述广义平衡偏斜因子ρ为所述割边比λ为λ=|e
cut
|/|e|;n为所述待划分图的子图总数,vertex(g
i
)为第i个子图g
i
的实际顶点数,vertex
e
(g
i
)为第i个子图g
i
的顶点数的期望值,|e|为所述待划分图的连接边总数,e
cut
为图划分过程产生的所有割边的集合。8.一种图划分装置,其特征在于,包括:规则预设置模块,用于预先根据并行计算系统的各计算节点的计算性能按照预设度量机制确定图划分规则,以将待划分图数据成比例地分配至各计算节点;图数据并行读取模块,用于根据图顶点数和加载线程数确定各加载线程的数据读取范围,同时调用多个加载线程以顶点为单位并行读取所述待划分图数据,并将各加载线程读取的图顶点数据传递给相应的划分线程;图划分模块,用于基于当前时刻已经划分好的图数据、按照所述图划分规则确定各划分线程中每个图顶点数据所属子图,并基于子图与计算节点间的对应关系将各图顶点数据划分至相应计算节点;划分决策模块,用于根据当前时刻各划分线程的图划分结果更新上一时刻的划分决策信息,并在划分线程请求时,将更新后的划分决策信息发送至各划分线程;所述划分决策信息为当前时刻已经划分好的图数据。9.一种图划分装置,其特征在于,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至7任一项所述图划分方法的步骤。10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有图划分程序,所述图划分程序被处理器执行时实现如权利要求1至7任一项所述图划分方法的步骤。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1