什么是OpenMPI中的分段环Allreduce(V2.0.2)?它是如何流水线的?
问题描述:
我一直在试图了解OpenMPI(V2.0.2)中的Segemented Ring Allreduce。但是我没能弄清楚这个流水线环allreduce,尤其是这些阶段如何流水线化。 (即计算阶段1(b)似乎同时执行两个阶段而不是“流水线”)。MPI专家是否可以提供此分段环Allreduce背后的动机以及有关流水线的详细信息?什么是OpenMPI中的分段环Allreduce(V2.0.2)?它是如何流水线的?
真的很感激, 利奥
答
我认为这已被要求在https://github.com/open-mpi/ompi/issues/4067回答
关于开放MPI的内部非常具体的问题,更好地直接问到Open MPI邮件列表(S)或github repository
@GillesGouaillardet –