读书笔记1-DL

       1. 为什么要激活函数? 由于神经网络的正向传播是通过线性组合实现的,导致神经网络是一个线性的模型。 将神经网络的输出,输入到非线性的激活函数里,使得整个神经网络不再是线性的, 可以处理非线性的问题。 P69:   2. 常用的激活函数有哪些? P70:   3. 交叉熵的作用? 判断输出向量和期望向量的接近程度,刻画了两个概率分布的距离。 P74:   4. Softmax激活函数
相关文章
相关标签/搜索