对DL课程的简单记录,忽略的知识点
1 . 神经元单元本质 : 一个 神经元 单元 , 其本质是 逻辑回归单元
实际上,可以将Logistic Regression看做是仅含有一个神经元的单层的神经网络!
下面以图例的方式给出了Logistic Regression的结构,该图清晰地展示了Logistic Regression的结构
从该图中可以看到,LR结构图的前半部分(不包含step function的部分,如下图红框所示)其实就是一个简单的神经元模型(关于神经网络的介绍见下文)
上图中绿色框中的部分为LR的threshold function(这里使用了step function),用来对前面激活函数的输出进行相应的阈值处理,从而实现两类分类问题(例如,threshold function函数输出为0时,对应类1,threshold function函数输出为1时,对应类2)