如何防止 Google Cloud Dataproc 集群虚拟机实例自动关闭?

How can I prevent Google Cloud Dataproc cluster VM instances from auto-shutoff?

当 运行 虚拟机实例集群+节点时,即使我正在使用 运行 集群/数据处理上的东西,虚拟机实例也会在大约 30 分钟左右后自动关闭。我找不到此设置,希望得到任何帮助:如何禁用它以防止它关闭,甚至如何以防止这种情况发生的方式配置新集群。

谢谢

默认 Dataproc 集群没有任何类型的自动关闭。

如果您使用的是旧版 Datalab 初始化操作,您可能会看到 Datalab 自己的非 Dataproc 感知关闭功能,您可以禁用此处建议的方法之一:

否则,如果您使用某种模板或 copy/paste 参数来创建 Dataproc 集群,可能是您不小心设置了“计划删除”:https://cloud.google.com/dataproc/docs/concepts/configuring-clusters/scheduled-deletion

如果这些设置都不能解释您的情况,您应该从“云日志”界面访问您的“activity 日志”,选择 Cloud Dataproc Cluster,然后打开 activity_log类型的日志以查看有关谁正在删除您的集群的审核日志。或者,如果集群仍然存在于 Dataproc 中,但底层虚拟机正在关闭,请访问“Compute Engine 虚拟机”日志类别并查看“activity 日志”以了解是谁停止了您的虚拟机。有时,在共享项目中,项目管理员可能 运行 某种自动关闭 VM 以节省成本的脚本。