首页 PaddleCV 帖子详情
复现的bisenet v2 语义分割网络
收藏
快速回复
PaddleCV 文章语义分割 6671 53
复现的bisenet v2 语义分割网络
收藏
快速回复
PaddleCV 文章语义分割 6671 53

复现的bisenet v2 语义分割网络  cityscapes数据集,训练了200轮 ,miou最高51%多,adam优化算法(lr=0.01),训练集2790张图片,loss在1.8~1.9,miou在七八十,测试集在500张,loss在3.5左右,miou最高51%,

感觉测试集的miou有点升不上去了,有点不知道咋办了?bn啥的都加了

请大佬指点下,还是我继续增加训练轮数?有点过拟合了?真是没有啥思路了

0
收藏
回复
全部评论(53)
时间顺序
AIStudio810258
#22 回复于2020-12
其实我觉得都是相对而言,从类别少迁移到类别多效果也不至于上不去,毕竟有些特征之前已经见过了,剩下的可能更大是训练没见过的,只是说,可能同等条件下,“见多识广”的预训练模型更有优势?

那这个意思就是,预训练模型不是学的它自己训练集的摸个类别的整体特征,而是区分各个类别的各个层次的特征

0
回复
AIStudio810258
#23 回复于2020-12
其实我觉得都是相对而言,从类别少迁移到类别多效果也不至于上不去,毕竟有些特征之前已经见过了,剩下的可能更大是训练没见过的,只是说,可能同等条件下,“见多识广”的预训练模型更有优势?

就是说,飞机、汽车的花纹会识别了,再学习识别船也会更容易。因为他们具有一些共同的特征。

 

0
回复
AIStudio810258
#24 回复于2020-12
我的意思是,即使在自己的训练集上预测也是预训练模型效果更好。有这种情况吧?觉得应该会有,那么这种情况下,一定要用预训练模型。

那么学会了识别交通工具的模型,迁移到识别动物上会不会没有什么帮助呢?

0
回复
AIStudio810258
#25 回复于2020-12
thinc #19
有这种可能,但是实验结果都证明预训练模型在数据小的情况下收敛都快一些

收敛快。那么最终的精度是不是还不如直接用预训练模型?如果预训练模型类别完全覆盖自己的数据的类别。

0
回复
AIStudio810258
#26 回复于2020-12
thinc #21
增加类别的话最后的fc就没用了,得重学

嗯,finetune主要就是重新训练最后的分类全连接层

0
回复
thinc
#27 回复于2020-12
那这个意思就是,预训练模型不是学的它自己训练集的摸个类别的整体特征,而是区分各个类别的各个层次的特征

这个不太好理解

0
回复
thinc
#28 回复于2020-12
就是说,飞机、汽车的花纹会识别了,再学习识别船也会更容易。因为他们具有一些共同的特征。  

对 边缘特征

0
回复
thinc
#29 回复于2020-12
嗯,finetune主要就是重新训练最后的分类全连接层

那是不是冻结全面的层只训练fc也可?

0
回复
thinc
#30 回复于2020-12
那么学会了识别交通工具的模型,迁移到识别动物上会不会没有什么帮助呢?

帮助应该还是有的,效果怎么样还得实践。

0
回复
AIStudio810260
#31 回复于2020-12
那么学会了识别交通工具的模型,迁移到识别动物上会不会没有什么帮助呢?

边缘啊等等

0
回复
AIStudio810258
#32 回复于2020-12
thinc #27
这个不太好理解

这方面看看可视化、可解释的材料应该有些帮助吧

0
回复
AIStudio810258
#33 回复于2020-12
thinc #27
这个不太好理解

前一阵有个mit的牛人,弄了个可视化分析卷积怎么学习特征图、怎么被激活的工具页面。。。

0
回复
AIStudio810258
#34 回复于2020-12
thinc #27
这个不太好理解

昨天大谷大神还在修复老北京视频的视频里提到着

0
回复
AIStudio810258
#35 回复于2020-12
thinc #29
那是不是冻结全面的层只训练fc也可?

这个要看情况吧,根据自己训练集的多少,和与预训练模型的训练集是否接近有关。

0
回复
AIStudio810258
#36 回复于2020-12
thinc #29
那是不是冻结全面的层只训练fc也可?

要是数据量不大,又和预训练模型的数据集高度相似,应该就可以吧

0
回复
AIStudio810258
#37 回复于2020-12
边缘啊等等

也是,再不同的物体也是存在一定相似性的。再说机器和人理解图片的方式也大相径庭

0
回复
AIStudio810260
#38 回复于2020-12
前一阵有个mit的牛人,弄了个可视化分析卷积怎么学习特征图、怎么被激活的工具页面。。。

对的,好像是博士论文什么的

0
回复
thinc
#39 回复于2020-12
这方面看看可视化、可解释的材料应该有些帮助吧

可以试试,

0
回复
thinc
#40 回复于2020-12
对的,好像是博士论文什么的

这些东西被研究透了,以后的课可能就可以开ai理论了

0
回复
thinc
#41 回复于2020-12
前一阵有个mit的牛人,弄了个可视化分析卷积怎么学习特征图、怎么被激活的工具页面。。。

web吗?我收藏夹里有可视化卷积

0
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户