图像处理单元GPU集群通信方法及电子装置

本申请实施例提供了一种图像处理单元GPU集群通信方法及电子装置，该方法包括：将GPU集群进行拆分，得到至少一个算法同构组和至少一个算法异构组；通过每个算法同构组中的同构GPU执行规约分发通信和全收集通信，并且通过每个算法异构组中的异构GPU执行全规约通信。因此，通过本申请实施例可以解决在异构GPU集群环境下，由于不同GPU之间通信库差异带来的异构GPU之间的通信量增加和引入额外数据拷贝开销的问题。