做模板网站怎么放视频教程,保定自助建站,5在线做网站,长春建筑学院x到u再到y#xff0c;可以理解为x是输入#xff0c;中间层hidden layer 是u#xff0c;最后y是pred 对于一个简单的线性层可以展开得到y的表达式#xff0c;但是对于实际的神经网络还要加上激活函数#xff0c;此时展开就非常的复杂#xff0c;不能够一次到位#xff0c… x到u再到y可以理解为x是输入中间层hidden layer 是u最后y是pred 对于一个简单的线性层可以展开得到y的表达式但是对于实际的神经网络还要加上激活函数此时展开就非常的复杂不能够一次到位因此使用链式法则一步步展开通过链式法则会让求导的过程变得比较简单而且每一个中间过程可能已经有了中间的结果所以用链式法则会让神经网络的求解变得非常清晰和简洁 把一个比较复杂不知道如何展开求导的式子链式法则成3个偏导对每一步再进行求解再乘积可以完成对复杂函数偏微分 发现通过链式法则和直接使用pytorch自动求导功能是完成匹配的