AWS Glue Error: The specified subnet does not have enough free addresses to satisfy the request
AWS Glue Error: The specified subnet does not have enough free addresses to satisfy the request
我有一个 AWS Glue 作业，它从 S3 获取数据，转换它并加载到多个 Redshift 表。
Glue Job Details:
Type: Spark
This job runs : A new script to be authored by you
Worker type: Standard
Maximum Capacity : 5
Connection Details:
The Glue job uses "Data catalog > connection" to connect to Redshift
Connection type : JDBC
Sometimes the Glue job fails with below Error:
The specified subnet does not have enough free addresses to satisfy the request (Service:AmazonEc2, Status Code: 400, Error Code:
InsuffecientFreeAdressesInSubnet)
有没有一种方法可以根据上述标准或任何其他方法来计算 Glue 作业所需的 IP 地址数量，以便我可以按顺序安排作业[=16= ]
Glue 或工作器中的数据处理单元 (DPU) 决定您需要的 IP 数量。如果您使用的子网没有足够的 IP，那么 select 一个小的 DPU 计数。您在连接中添加的子网是被使用的子网。如果您在同一个 VPC 中有另一个子网，您可以使用它，只要您可以从该子网访问您的 redshift 集群。
我有一个 AWS Glue 作业，它从 S3 获取数据，转换它并加载到多个 Redshift 表。
Glue Job Details:
Type: Spark
This job runs : A new script to be authored by you
Worker type: Standard
Maximum Capacity : 5Connection Details:
The Glue job uses "Data catalog > connection" to connect to Redshift
Connection type : JDBCSometimes the Glue job fails with below Error:
The specified subnet does not have enough free addresses to satisfy the request (Service:AmazonEc2, Status Code: 400, Error Code: InsuffecientFreeAdressesInSubnet)
有没有一种方法可以根据上述标准或任何其他方法来计算 Glue 作业所需的 IP 地址数量，以便我可以按顺序安排作业[=16= ]
Glue 或工作器中的数据处理单元 (DPU) 决定您需要的 IP 数量。如果您使用的子网没有足够的 IP，那么 select 一个小的 DPU 计数。您在连接中添加的子网是被使用的子网。如果您在同一个 VPC 中有另一个子网，您可以使用它，只要您可以从该子网访问您的 redshift 集群。