神经网络前向传播和反向传播

两层神经网络 (N,D_I,H,D_O)(64,10000,1000,10) 公式(简化没放b) H=w1x y=w2H #设置learning_ratw=1e-6 #数据初始化 x,y,w,b #前向传播 把公式的内容写一遍 #计算loss值(y_pred-y) #反向传播 从loss里得到grad_y_pred--->grad_w2--->grad_h_relu--->grad_h--->gr
相关文章
相关标签/搜索