使用 AWS CloudFormation 为 AWS Glue 作业启用自动缩放功能

Enable autoscaling feature for AWS Glue Jobs using AWS CloudFormation

最近 AWS 宣布了一项适用于 Glue ETL 和流作业的自动缩放功能。我今天看到我目前工作的地区现在支持此功能。

我可以使用控制台确认这是否有效,如 documentation 中所述。

我想知道是否可以使用 CloudFormation 启用此功能。在 CloudFormation documentation 中,我没有看到任何可以启用此功能的设置。

我猜测只有在该功能退出 预览 模式后才可用,但我不是 100% 确定。有人对此了解更多吗?或者有人可以证实我的推测吗?

看来您只需将正确的参数传递给作业即可启用自动缩放,而无需等待任何资源更新。

这是一个从文档中启用书签的例子,你应该可以传递 "--enable-auto-scaling": "true" 来代替。

默认参数: "--job-bookmark-option": "job-bookmark-enable"