通过Google Cloud并行运行多个Colab笔记本?

SantoshGupta7

我需要在colab中进行大量处理,而1-3台笔记本电脑要花很长时间才能完成所有这些工作。

是否可以为更多的colab实例付费,这样我一次可以运行10-20台笔记本电脑?我想我已经在Google Cloud上看到了这种可能性,但是我对细节感到迷惑。如果可能的话,是否有指南向我显示如何执行此操作?

鲍勃·史密斯

请参阅此页面上的“连接到Google Compute Engine实例上的运行时”部分:

https://research.google.com/colaboratory/local-runtimes.html

在此处复制:

如果您要连接的Jupyter笔记本服务器在另一台计算机(例如Google Compute Engine实例)上运行,则可以设置SSH本地端口转发以允许Colaboratory连接到它。

注意:Google Cloud Platform为深度学习VM映像提供了预先配置的Colaboratory本地后端支持。按照操作指南进行操作,以使用本地SSH端口转发设置您的Google Compute Engine实例。如果使用这些图像,请直接跳至步骤4:连接到本地运行时(使用端口8888)。

首先,按照上述说明设置Jupyter笔记本服务器。

其次,建立从您的本地计算机到远程实例(例如Google Compute Engine实例)的SSH连接,并指定“ -L”标志。例如,要将本地计算机上的端口8888转发到Google Compute Engine实例上的端口8888,请运行以下命令:

gcloud compute ssh --zone YOUR_ZONE YOUR_INSTANCE_NAME -- -L 8888:localhost:8888

最后,通过连接到转发的端口在Colaboratory中建立连接(遵循步骤4:连接到本地运行时下的相同说明)。

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章

如何从Google Colab笔记本的“ .py”文件中运行Python脚本?

使用Google Cloud SDK在本地运行Google语音转文本JupyterLab笔记本脚本

在Google Colab笔记本中启动Dash应用

将Google Colab笔记本转换为PDF / HTML?

Google colab笔记本上的Corgi模式是什么?

Google Colab:打开Python笔记本时API错误?

Google Colab - 无法打开任何笔记本

在Python中嵌入Matplotlib动画(Google Colab笔记本)

如何为 R 打开新的 Google Colab 笔记本?

您如何通过Google Cloud Composer安排GCP AI平台笔记本?

关闭本地PC后,Google Cloud Platform jupyter笔记本仍在运行

如何从Colab笔记本中提取Google Cloud Storage存储桶中的tar.gz文件?

Google Colab Pro错误:无法识别的运行时“ tensorflow”;默认为“ python3”笔记本设置

如何在Google Colab上运行jupyter笔记本k次并取得一些结果?

如何在Google Colab笔记本中通过gmplot绘制命令查看html输出文件?

测试笔记本是否在Google Colab上运行

通过命令行并行运行多个线程

如何并行运行多个 celery 任务(通过使用组)?

通过ssh隧道远程运行ipython笔记本

如何在Google Colab中将Jupyter笔记本的功能导入另一个Jupyter笔记本

如何在Google Cloud Datalab的另一个笔记本中执行python笔记本

Google云端硬盘无法将.ipynb文件识别为colab笔记本

如何从Google Colab笔记本的单元格中删除表格?

如何打开保存在 Google Colab 文件中的笔记本

如何使用有限权限共享Google Colab笔记本

使用R内核将私人数据导入Google Colab笔记本

在Google Colab研究笔记本中读取Shell脚本结果

在Google的Colab笔记本中,如何从Python文件中调用函数?

在colab笔记本中的Google驱动器中定义文件的路径