首页 炼丹房 帖子详情
同时欠拟合和过拟合怎么回事?
收藏
快速回复
炼丹房 问答新手上路 2464 31
同时欠拟合和过拟合怎么回事?
收藏
快速回复
炼丹房 问答新手上路 2464 31

最近用2.0的动态图写了下resnet和densenet,训练集准曲率都很低,怎么回事?

0
收藏
回复
全部评论(31)
时间顺序
AIStudio810258
#22 回复于2020-10
thinc #17
CIFAR100......这个数据集的准确率很难上去......
0
回复
AIStudio810258
#23 回复于2020-10
thinc #17
CIFAR100......这个数据集的准确率很难上去......

这个分辨率太低了,新的文章似乎都不用吧,现在比赛连imagenet都不用了

0
回复
thinc
#24 回复于2020-10

70多。。。

我尝试了一下午,停在50上不去

0
回复
AIStudio810258
#25 回复于2020-10
thinc #18
又get到一个新知识点,欠拟合还和方差有关吗? 不对,方差大不就说明数据不够多吗,太少的数据没法体现整体的分布情况

我理解方差太大说明模型拟合数据分布的误差大,也就是欠拟合的表现

0
回复
thinc
#26 回复于2020-10
这个分辨率太低了,新的文章似乎都不用吧,现在比赛连imagenet都不用了

就是因为他的size小类别还多  分类难度很大   没什么意义

0
回复
AIStudio810258
#27 回复于2020-10
我理解方差太大说明模型拟合数据分布的误差大,也就是欠拟合的表现

不对,是偏差小、方差大的情况下说明过拟合了

0
回复
AIStudio810258
#28 回复于2020-10
不对,是偏差小、方差大的情况下说明过拟合了

应该这么说吧,在训练集上,方差大是欠拟合的表现;如果在训练集上方差小,在验证集上方差大,就说明泛化误差大,是过拟合了。

0
回复
AIStudio810258
#29 回复于2020-10
thinc #20
这个测试集和验证集有区别吗。。。概念有点弄混,验证集是不是指比赛这种提交成绩用的验证数据呢

我理解,验证集用来在训练时观察模型的拟合情况,主要是是否过拟合。测试集是测试泛化误差的保险吧,哈哈,应该没什么硬性区别

0
回复
thinc
#30 回复于2020-10
不对,是偏差小、方差大的情况下说明过拟合了

我记得很清楚  四中情况四个点

0
回复
AIStudio810258
#31 回复于2020-10
thinc #30
我记得很清楚  四中情况四个点

嗯,是的。我觉得还要考虑训练集和验证集吧

0
回复
何必固執丶
#32 回复于2020-10

这个是什么呢?

 

0
回复
在@后输入用户全名并按空格结束,可艾特全站任一用户