如何防止神经网络过拟合?

如题所述

第1个回答  2019-07-23
过拟合现象一般都是因为学习的过于精确,就好比让机器学习人脸,取了100个人的脸训练,但是由于你学习的过精确,导致除了这个样本100人外 其他的人脸神经网络都认为不是人脸,实际我们只需要学习人脸的基本特征 而不是详细到人的皮肤细腻 眼睛大小等过于细致的特征,这样可以保证机器还是能识别别的图片中的人脸的
第2个回答  2019-01-26
首选解决方案增大数据量
其次是各种解决手段 优化器的选择 正则方法的引入 dropout的引入 数据增强 early stopping机制 权重衰减策略
上述即为常见的防止过拟合的手段
第3个回答  2018-12-30
你这个问题本来就问的很模糊,你是想问神经网络的过拟合变现什么样还是为什么出现过拟合呢。为此针对于第一个问题,神经网络的过拟合与支持向量机、高斯混合模型等建模方法的过拟合类似,表现为针对于训练数据集的建模效果很好,而对于测试数据集的建模效果很差,因为过于强大的学习能力是的预测模型中的噪声将有用信息湮没了,致使泛化能力很差。针对于第二个问题,出现上述现象的主要原因在于隐层节点数太多(隐层节点数越多,学习能力越强),使得预测模型在训练时候将训练数据集中的噪声也挖掘出来了,也就是噪声将有用信息湮没了。所以在使用神经网络进行建模时一定要处理好模型过拟合的问题,可以一方面增加数据的样本集,另一方面采用交叉验证选择合适的隐层节点数,在精度与泛化能力之间做一个权衡,最常用的方法就是增加正则化项,一定程度上可以防止模型的过拟合问题。(+机器学习算法与Python学习)本回答被网友采纳
相似回答