首页 Paddle框架 帖子详情
2.0的DataLoader如何异步读取数据集?
收藏
快速回复
Paddle框架 问答深度学习 677 5
2.0的DataLoader如何异步读取数据集?
收藏
快速回复
Paddle框架 问答深度学习 677 5

原来一直用yield写的异步读取函数,2.0对读取接口升级了。想试试用新接口。

0
收藏
回复
全部评论(5)
时间顺序
AIStudio810258
#2 回复于2020-10

以前一直是把用yield写好的函数改来改去用在不同数据集,现在有新版规范接口了,添加数据增广什么的都比较规范。

但不知道接口到底怎么实现的,不太清楚怎么异步使用

0
回复
AIStudio810258
#3 回复于2020-10

在Dataset对象的__getitem__()方法里用yield 返回数据就可以实现异步读取么?

0
回复
AIStudio810258
#4 回复于2020-10

大佬们有没有项目或文档教程的推荐一下

0
回复
Saxon
#5 回复于2020-10
大佬们有没有项目或文档教程的推荐一下

看看下面这两个文档中的一个都可以:

【飞桨框架2.0beta升级指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/guides/upgrade_guide_cn.html#id8

【飞桨高层API使用指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/tutorial/quick_start/high_level_api/high_level_api.html#id4

里面有介绍新的Dataset定义方式。

0
回复
AIStudio810258
#6 回复于2020-10
Saxon #5
看看下面这两个文档中的一个都可以: 【飞桨框架2.0beta升级指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/guides/upgrade_guide_cn.html#id8 【飞桨高层API使用指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/tutorial/quick_start/high_level_api/high_level_api.html#id4 里面有介绍新的Dataset定义方式。
展开

谢谢雨佬~

0
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户