概览:

    1. 一劳永逸配置:激活函数、数据预处理、权重初始化、正则化、梯度校验
    2. 训练过程中需要动态关注的量:验证集上的误差,有没有过拟合,参数的更新和超参数的优化
    3. 模型评估与集成

    Part 1:

    1. 激活函数的选择:常见激活函数理解
    2. 数据预处理:
    3. 权重初始化
    4. 批归一化
    5. 密切关注训练过程
    6. 超参数优化