MachineLearningWu_11_NeuralNetworkLayer

x.1 Neural Network layer design

我们接下来来讲解一下深度学习中，神经网络是如何架构的。对于一个具有两层的的神经网络，我们将输入层置为layer0，将第一层隐藏层置为layer1，将$w_2^{[1]}$标记为第一层中，第二个权重参数。而第一层的输出将作为第二层的输入，

我们将上面的式子进行向量化后，得到如下式子，

x.2 Forward Propagation

前向传播中，我们会将步骤转换为矢量表示并进行计算表达，使用全连接层完成，过程步骤如下，