多卡训练中实际的batchsize是fit里设置的Batchisize还是需要乘以卡数?
收藏
多卡训练中实际的batchsize是fit里设置的Batchisize还是需要乘以卡数?
0
收藏
请登录后评论
https://blog.csdn.net/qq_36136196/article/details/118683189
可以参考这个
以图片输入为例,8卡的环境中,批大小设为512的话,每张卡上就分到64张图片。