深度学习的多gpu并行尝试——qjzcy的博客

深度学习的多gpu并行尝试——工做学习中的一点体会python 目录 1、 深度学习并行经常使用方法 2、 代码解析 3、 实验结果 4、 一些细节web （一）并行经常使用方法： 通常有两种方法，一种是模型并行，另外一种是数据并行。 模型并行： 因为bp网络的过程是个串行的过程，因此模型并行主要用在一个gpu的显存不能把全部的图结构都保存下来，因而咱们把一个完整的网络切分红不一样块放在不一样gp

>>阅读原文<<