将 Colab 连接到付费 TPU

Question

我想将 Colab 连接到付费 TPU（从免费 TPU 升级）。我使用本指南创建了一个 JSON 密钥：https : //cloud.google.com/docs/authentication/production#auth-cloud-explicit-python，然后将其上传到 Colab。我可以连接到我的存储，但不能连接到 TPU：

%tensorflow_version 2.x
import tensorflow as tf
import os
os.environ['GOOGLE_APPLICATION_CREDENTIALS'] = './gcp-permissions.json'

# Authenticated API request - works.
storage_client = storage.Client.from_service_account_json(
    'gcp-permissions.json')
print(list(storage_client.list_buckets())

#Accessing the TPU - does not work. Request times out.
cluster_resolver = tf.distribute.cluster_resolver.TPUClusterResolver(
    tpu='My-TPU-Name',
    zone='us-central1-a',
    project='My-Project-Name'
)

我还尝试了 TPUClusterResolver 调用，仅使用 tpu 名称和 'credentials=gcp-permissions.json' - 结果相同。我已经仔细检查了我的 TPU 是否已在 GCP 控制台中启动并运行。它不是抢占式的。我错过了什么？

谢谢！

Answer 1

所以看起来您正在尝试从 Colab 笔记本连接到您自己的 Google Cloud 项目的付费 TPU，是吗？这不起作用，因为 Colab 运行时由 GCE VM 支持，该 VM 位于与您自己的项目不同的项目中My-project-name。因此，您还想在同一项目中创建一个 GCE VM 并从该 VM 运行您的训练脚本。查看本教程： https: //cloud.google.com/tpu/docs/quickstart。