【2017CS231n】第四讲:介绍神经网络

一.反向传播     在说反向传播前,先介绍计算图的概念,我觉得计算图是个利器。 1.1 计算图     我们可以把f=W*x用一张类似流程图的东西表达出来,如下图所示,我们成这张图叫做计算图。其实就是把公式分解成小的计算单元。     在这张图中,输入的训练数据x和权重W通过*连接到一起,运算后得到分数s,s经过hinge loss计算得到损失项Li,通过加法符号与正则项R连接得到结果L。   
相关文章
相关标签/搜索