2.0的DataLoader如何异步读取数据集?
收藏
原来一直用yield写的异步读取函数,2.0对读取接口升级了。想试试用新接口。
0
收藏
请登录后评论
以前一直是把用yield写好的函数改来改去用在不同数据集,现在有新版规范接口了,添加数据增广什么的都比较规范。
但不知道接口到底怎么实现的,不太清楚怎么异步使用
在Dataset对象的__getitem__()方法里用yield 返回数据就可以实现异步读取么?
大佬们有没有项目或文档教程的推荐一下
看看下面这两个文档中的一个都可以:
【飞桨框架2.0beta升级指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/guides/upgrade_guide_cn.html#id8
【飞桨高层API使用指南】https://www.paddlepaddle.org.cn/documentation/docs/zh/2.0-beta/tutorial/quick_start/high_level_api/high_level_api.html#id4
里面有介绍新的Dataset定义方式。
谢谢雨佬~