脚本任务中生成的模型权重出问题
收藏
直接把权重移到了/root/paddlejob/workspace/output/下,系统自动压缩,解压后发现权重被截断。是不是应该压缩后再放入/root/paddlejob/workspace/output/中。
项目链接:https://aistudio.baidu.com/aistudio/clusterprojectdetail/695908
0
收藏
请登录后评论
8卡训练了7个多小时,结果权重用不了心累啊
会不会模型很大,还没解压完
应该是解压完了,压缩包里文件的大小也比正常的少了很多
我遇上过类似问题,我就进一下cpu主机,确保再次进gpu主机时不是同一个~~
然后,等一会(这个一会和项目大小成正比),看看好了没有
我也遇到了