Google Colab 从 Google Drive 读取数据(图像)的速度非常慢

Chr*_*nti 8 image dataset google-colaboratory

我使用以下代码将我的 Google Drive 连接到 Google Colab:

# Load the Drive helper and mount
from google.colab import drive

# This will prompt for authorization.
drive.mount('/content/drive')
Run Code Online (Sandbox Code Playgroud)

现在,当我想读取驱动器中包含图像的一系列文件夹时,与我的电脑相比,它的运行速度非常慢!

而且我注意到,如果我第二次运行代码,上次运行中已经读取的文件夹的加载速度会更快。

您对这个问题有什么建议吗?谢谢。

Ale*_*ick 7

对我来说最好的方法是压缩文件,然后将它们解压缩到虚拟机磁盘中。

将文件读入 VM 磁盘比从驱动器中单独读取每个文件要快得多。

假设您在本地计算机的 Data 文件夹中拥有所需的图像或数据。压缩数据以获取 Data.zip 并将其上传到云端硬盘(如果您的云端硬盘上只有这些文件,也可以在那里压缩它们)。

现在,安装驱动器并运行以下命令:

!unzip "/content/drive/My Drive/path/to/Data.Zip" -d "/content"

现在修改所有数据路径以通过 /content/Data,读取图像将会快得多。

**改编自我对上一个问题的回答,但我最初查看了两个问题都无济于事。