项目链接可以提供一下吗？
https://aistudio.baidu.com/aistudio/projectdetail/334852
你跑的是什么模型呀？大概持续多长时间了？
多半时内存溢出的问题，将batchsize调小点试试
跑的是paddledetection的cascade_rcnn_cbr200_vd_fpn_dcnv2_nonlocal_softnms模型，一般就是跑10多分钟，然后出现这个问题，也没看到程序报错
batchsize已经是1了。。
我遇到过把模型当参数传递给函数导致溢出重启。可能更参数的深浅拷贝有关。
后来同样的代码在最外层用循环执行就好了。模型当参数传入函数里就重启。
加下我QQ吧980902922，了解下你的详细情况以便于帮您解决问题。
内存爆了？可以开命令行，用`top`命令监控一下内存
不知道是不是昨天服务器不稳定，今天几乎一样的代码没碰到这个问题。。
多半是内存爆了
优化一下试试
有可能内存溢出
是不是没有设置notebook保留时间然后就退出了？默认的保留时间只有10分钟
内存溢出和时间到时你看下哪个
内存溢出或者显存溢出，一般会报错
内存满了，不能全部占用内存资源
网络问题吧是不是开着什么软件
项目链接可以提供一下吗？
https://aistudio.baidu.com/aistudio/projectdetail/334852
https://aistudio.baidu.com/aistudio/projectdetail/334852
你跑的是什么模型呀？大概持续多长时间了？
多半时内存溢出的问题，将batchsize调小点试试
跑的是paddledetection的cascade_rcnn_cbr200_vd_fpn_dcnv2_nonlocal_softnms模型，一般就是跑10多分钟，然后出现这个问题，也没看到程序报错
batchsize已经是1了。。
我遇到过把模型当参数传递给函数导致溢出重启。可能更参数的深浅拷贝有关。
后来同样的代码在最外层用循环执行就好了。模型当参数传入函数里就重启。
加下我QQ吧980902922，了解下你的详细情况以便于帮您解决问题。
内存爆了？可以开命令行，用`top`命令监控一下内存
不知道是不是昨天服务器不稳定，今天几乎一样的代码没碰到这个问题。。
多半是内存爆了
优化一下试试
有可能内存溢出
是不是没有设置notebook保留时间然后就退出了？默认的保留时间只有10分钟
内存溢出和时间到时你看下哪个
内存溢出或者显存溢出，一般会报错
内存满了，不能全部占用内存资源
网络问题吧是不是开着什么软件