Pytorch auto_grad学习心得

如上有向无环图中, X \textbf{X} X和 b \textbf{b} b是叶子节点(leaf node),这些节点通常由用户自己创建,不依赖于其他变量。 z \textbf{z} z称为根节点,是计算图的最终目标。利用链式法则很容易求得各个叶子节点的梯度。 ∂ z ∂ b = 1 ,   ∂ z ∂ y = 1 ∂ y ∂ w = x , ∂ y ∂ x = w ∂ z ∂ x = ∂ z
相关文章
相关标签/搜索