DL-损失函数与优化

上周对于NN的框架有了整体的把握,这周看了一些网络中的核心问题。中间穿插的看了一些视频,主要还是啃DL这本书,把第七章和第八章看完了(跳过了dropout,个人觉得这个对于现阶段的我有点细节)。第七章是正则化问题,着重理解了一些其中证明的过程;第八章是优化问题,书上的讲法偏顶层设计。以后就是对每个网络的研读了。 正则化 范数惩罚 一种是参数范数惩罚,为了分析权重衰减的一些变化,假设了目标w*,并在
相关文章
相关标签/搜索