TensorFlow基础(二)

TensorFlow的节点分配 一个硬件设备时,计算图会按依赖关系被顺序执行。 一个节点的所有上游依赖都被执行完时(依赖数为0),此节点加入ready queue,同时下游节点依赖数减1。 多个设备时: (1)每一个节点该让什么硬件设备执行 (2)如何管理节点间的数据通信 问题一,TensorFlow设计了一套节点分配设备的策略(贪婪策略,不能确保找到最优解)。 首先,策略需要计算一个代价模型,估
相关文章
相关标签/搜索