BP+SGD+激活函数+代价函数+基本问题处理思路

0. 学习模型评价标准     1）学习速度     2）推广能力/泛化能力/Generalize 1. 反向传播算法计算全过程       目标：计算出权重和偏差的梯度（通过反向传播误差的方式）。       下例中，其激活函数为Sigmoid函数：       2. 随机梯度下降法计算全过程       目标：更新权重和偏差。       下例中，其激活函数为Sigmoid函数：      

>>阅读原文<<