真是流弊!
厉害
可以用time,也可以自己根据运行时间估算step 数量
心算,手动~~
我还没发现有现成的api 干这个
发明的冲动源于“偷懒”的愿望~~
直接一个当前时间,然后整点保存哈哈哈
现在发现一些任务可以Notebook和脚本同时跑,Notebook做预处理,脚本训练,还能一边训练一边改
激动人心的发现!
一边跑一边该这个太香辣
能发个demo项目么?
哈哈哈还在整理,不过目前只有些比较简单的模型库,PaddleDetection这种实在搬不动啊
其实不完全是同时啦,有一点时间差,不过总比Notebook一开始训练就啥也做不了来得好点
那也很棒了哈哈哈
6啊
没错,脚本太爽了
可是脚本太贵了。
我有时候算错执行时间,挂上机后,第二天一看,停也不是,不停也不是~~
昨天我算好要挂7个小时,结果挂成了70小时。。。
悲催的是偷懒,中间没保存checkpoint
如果中间能做处理,能不能运行时改变训练轮数或中间插入模型保存代码呢?
厉害
可以用time,也可以自己根据运行时间估算step 数量
心算,手动~~
我还没发现有现成的api 干这个
发明的冲动源于“偷懒”的愿望~~
直接一个当前时间,然后整点保存哈哈哈
现在发现一些任务可以Notebook和脚本同时跑,Notebook做预处理,脚本训练,还能一边训练一边改
激动人心的发现!
一边跑一边该这个太香辣
能发个demo项目么?
哈哈哈还在整理,不过目前只有些比较简单的模型库,PaddleDetection这种实在搬不动啊
其实不完全是同时啦,有一点时间差,不过总比Notebook一开始训练就啥也做不了来得好点
那也很棒了哈哈哈
6啊
没错,脚本太爽了
可是脚本太贵了。
我有时候算错执行时间,挂上机后,第二天一看,停也不是,不停也不是~~
昨天我算好要挂7个小时,结果挂成了70小时。。。
悲催的是偷懒,中间没保存checkpoint
如果中间能做处理,能不能运行时改变训练轮数或中间插入模型保存代码呢?