设备上没有剩余空间 [Amazon SageMaker]

Jyo*_*ula 8 amazon-sagemaker

我正在 P2.xlarge 实例中训练我的模型。当我下载数据集时,出现以下错误:“下载或解压期间出现异常:[Errno 28] 设备上没有剩余空间”\ 我检查 P2.xlarge 有 61GiB 存储空间,转换为 64GB。我的实例中几乎没有 5GB 的数据。您能让我知道如何继续吗?

小智 7

感谢您使用 Amazon SageMaker。

P2.xlarge 上的 61GiB 是 RAM 存储,与任何笔记本实例获得的持久存储不同。目前,默认情况下,无论实例类型如何,每个笔记本实例都有 5 GB 的存储空间。请注意,只有存储在这 5 GB 存储中的数据会在笔记本实例重新启动后保留,您还可以在 /tmp 中使用 ~10* GB 的非持久存储,但该数据不会在笔记本实例重新启动后保留。

顺便说一句,您还可以将 EFS 文件系统与 SageMaker 结合使用,为笔记本实例提供更多空间。有一篇博客介绍了如何使用生命周期操作添加 EFS 挂载,此处将 EFS 文件系统挂载到 Amazon SageMaker 笔记本(使用生命周期配置)

如果有任何其他方式可以提供帮助,请告诉我们。

谢谢,
尼拉姆


小智 1

默认情况下,笔记本实例具有 5GB 存储空间,无论其类型如何。您还可以在 /tmp 中使用 20GB 的非持久存储。

https://docs.aws.amazon.com/sagemaker/latest/dg/howitworks-create-ws.html

希望这可以帮助。