学习率降为零

项目

数据集

课程

比赛

模型库

活动

论坛

访问飞桨官网

项目

数据集

课程

比赛

模型库

活动

论坛

访问飞桨官网

小小小梦发布于2021-03

使用paddledetection在线训练，yolov3_mobilenet_v1网络，设定的训练轮数是20000，结果每次都是训练到18000时学习率就降到了零，设置的学习率是0.00001，为什么会有这种情况，怎样解决呢，谢谢

0

收藏

回复

全部评论(6)

AIStudio810258

#2 回复于2021-03

是不是设置了学习率衰减

0

回复

AIStudio810258

#3 回复于2021-03

18000步后将学习率给衰减到几乎为0了

0

回复

AIStudio810258

#4 回复于2021-03

如果自己控制也可以试试分段衰减

0

回复

AIStudio810258

#5 回复于2021-03

如果初始学习率就不大，在加上余弦衰减就可能这样

0

回复

AIStudio810259

#6 回复于2021-03

可以啊。

0

回复

小

小小梦

#7 回复于2021-03

是的，是设置了学习率衰减，衰减到零了这是正常的还是网络出现了问题呢

0

回复