broad策略

一个完整的神经网络模型迭代一次的时间可能会非常长,导致调整超参数是成为一件非常耗时的工作。 可以用以下方法简化问题,以便更快地得到反馈。 反馈速度快,就能快速尝试各种超参数。

  1. 问题分解,例如手写数字要将样本分成10类,可以先只分0、1两类。

  2. 减小训练样本数

  3. 简化神经网络,减少层数

  4. 增加monitor的频率

Last updated