如何解决如何将变换函数添加到 ray.util.sgd.data.dataset 导入数据集?
我正在使用 ray 开发分布式 pytorch,并尝试使用 Dataset,它是 ray.util.sgd.data.dataset 的一部分。当我从自定义数据源加载数据时,我需要使用它。我能够加载数据,但没有调用 transform 函数。
出于测试目的,我将转换添加到 https://docs.ray.io/en/master/raysgd/raysgd_dataset.html#
上提供的示例代码中num_points = 32 * 100 * 2
data = [i * (1 / num_points) for i in range(num_points)]
dataset = Dataset(
data,batch_size=32,max_concurrency=2,download_func=lambda x: (to_mat(x),to_mat(x)),transform = lambda x : x*100
)
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。