0%

batch和全数据集训练的不同

2018年9月28日 下午9:33
当我们分批学习时,每次使用过全部训练数据完成一次Forword运算以及一次BP运算,成为完成了一次epoch

batch:是用多个局部最优,最后平均出一个全局最优。
全数据集:是直接求出全局最优。
结论:如果数据集较小,可以采用全数据集(Full batch learning)的形式

深度学习中的batch、batch size与epoch - CSDN博客