4.1 深层神经网络

Logistic 回归:无隐层
2层神经网络:单隐层
3 层神经网络:双隐层
N层神经网络:N-1个隐层
image.png

深度神经网络的符号表示方法
image.png

4.2 深层网络中的前向传播

image.png

4.3 核对矩阵的维数

image.png
image.png

4.4 为什么使用深层表示?

深度表示的直观感受:
以人脸识别为例:边缘检测 -> 眼睛、鼻子等人脸要素的识别 -> “人脸”的组装
以音频识别为例:声波识别 -> 音位识别 -> 单词识别 -> 句子、短语的识别
image.png

电路理论对深度学习的解释(如果不使用层次结构,输入单元数将会指数级增长)
image.png