首页 Paddle框架 帖子详情
Fleet Collective 开发,用 optimizer 和Strategy 一层。model 一层? 已解决
收藏
快速回复
Paddle框架 问答模型训练 378 1
Fleet Collective 开发,用 optimizer 和Strategy 一层。model 一层? 已解决
收藏
快速回复
Paddle框架 问答模型训练 378 1

使用 Fleet Collective 模式进行开发时,已使用 fleet.distributed_optimizer 对 optimizer 和 fleet.DistributedStrategy 包了一层。想确认模型是否也需要使用 fleet.distributed_model 再包一层?

旧鸱c_
已解决
2# 回复于2021-08
需要将fleet.distributed_model在封装一层。原因是动态图主要在fleet.distributed_model进行分布式设计,静态图是在fleet.distributed_optimizer进行分布式设计。所以,如果不区分动态图和静态图,两个接口都是需要的。
展开
0
收藏
回复
全部评论(1)
时间顺序
旧鸱c_
#2 回复于2021-08

需要将fleet.distributed_model在封装一层。原因是动态图主要在fleet.distributed_model进行分布式设计,静态图是在fleet.distributed_optimizer进行分布式设计。所以,如果不区分动态图和静态图,两个接口都是需要的。

0
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户