实例为 运行 时是否可以修改 AWS Glue 脚本

Can the AWS Glue script be modified while an instance is running

这是一个比较笼统的问题,我找不到答案。

  1. 当实例 ID 运行 时,可以修改 AWS Glue 脚本吗?
  2. 脚本的编辑会不会影响一审的执行。比如,第一个实例会继续执行旧代码的副本。还是先用新版代码。

当多个开发人员共享一个粘合作业来执行他们的脚本时,就会出现此问题。

当您运行 Glue ETL 作业时,它会按指定顺序执行以下操作

  1. 在后端启动请求数量的 DPU
  2. 从 S3 路径下载 ETL 脚本。
  3. 使用 spark-submit 命令在 Spark 环境中执行 ETL 脚本

因此,为了回答您的问题,

  1. 是的,您可以在作业执行其 JobRun 时编辑 Glue 作业的脚本
  2. 不,它不会影响已经 运行ning 个作业实例的执行