如何 run/re-run 作业子集 AWS Glue 工作流程？

Question

我正在构建一个 AWS Glue 工作流程，该工作流程由运行长期作业组成，其中许多作业可能会失败。有什么方法可以在失败后重新运行工作流程中的特定分支？

例如，我的工作流程如下所示：

<Start Trigger> -> [Job 1] -> [Job 2] -> [Job 4]
       ↳ [Job 4]

假设 [Job 1] 和 [Job 4] 各花费 3 小时并且都成功完成。然后 [Job 2] 被触发但失败了，使我的工作流处于这种状态：

<Start Trigger> -> [Job 1 ✔] -> [Job 2 ✗] -> [Job 4]
       ↳ [Job 4 ✔]

我做了一个更改，修复了 [Job 2]，并且相信在重新运行时它会运行成功。我希望能够仅重新运行工作流的 [Job 2] -> [Job 4] 分支，因为所有其他父作业都已成功完成。

Answer 1

自 2020 年 8 月起，现在可以执行此操作。

How to run/re-run subset of jobs AWS Glue workflow?