如何限制ASG中竞价型实例池的数量?
How to limit the number of spot instace pools in an ASG?
我正在设置一个具有 mixed instances policy 的自动扩展组 (ASG) 以使用多个 Spot 实例类型。如何限制我的 ASG 使用的 Spot 实例池的数量?
Spot Instance pools定义如下:
A set of unused EC2 instances with the same instance type (for example, m5.large
), operating system, Availability Zone, and network platform.
我明白,在我的例子中,竞价型实例池基本上是一对不同的可用区和实例类型。
我的 CloudFormation 模板使用混合实例策略创建了一个包含 16 个实例的自动缩放组。它使用四种实例类型和所有可用区。测试区域 us-west-2
有四个可用区。理论上,该组应该可以使用多达十六个spot isstance pool。
堆栈的 SpotInstancePools
参数设置 ASG 的同名 属性。我试过设置各种值,但似乎并不能直接控制ASG使用的spot实例池的数量。
CloudFormation 模板:
AWSTemplateFormatVersion: '2010-09-09'
Description: Testing mixed instance policies
Parameters:
SpotInstancePools:
Type: Number
Default: 1
Description: The ASG's number of spot instance pools.
ImageId:
Type: AWS::EC2::Image::Id
Default: ami-061392db613a6357b
Description: Launch template's AMI. Defaults to Amazon Linux 2.
Resources:
AutoScalingGroup:
Type: AWS::AutoScaling::AutoScalingGroup
Properties:
AvailabilityZones: !GetAZs
MaxSize: 16
MinSize: 16
MixedInstancesPolicy:
InstancesDistribution:
OnDemandAllocationStrategy: prioritized
OnDemandBaseCapacity: 0
OnDemandPercentageAboveBaseCapacity: 0
SpotAllocationStrategy: lowest-price
SpotInstancePools: !Ref SpotInstancePools
SpotMaxPrice: ''
LaunchTemplate:
LaunchTemplateSpecification:
LaunchTemplateId: !Ref LaunchTemplate
Version: !GetAtt LaunchTemplate.LatestVersionNumber
Overrides:
- InstanceType: t2.small
- InstanceType: t3.small
- InstanceType: t2.medium
- InstanceType: t3.medium
LaunchTemplate:
Type: AWS::EC2::LaunchTemplate
Properties:
LaunchTemplateData:
ImageId: !Ref ImageId
创建堆栈的命令 mixed-instances-policy-test-1
,其 SpotInstancePools 计数为 1:
aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-1 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=1 \
--region us-west-2 \
--profile test
创建堆栈的命令 mixed-instances-policy-5
,其 SpotInstancePools 计数为 5:
aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-5 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=5 \
--region us-west-2 \
--profile test
列出使用的唯一 spot 实例池数量的命令(根据需要替换堆栈名称):
aws ec2 describe-instances \
--filters 'Name=tag:aws:cloudformation:stack-name,Values=mixed-instances-policy-test-1' \
--query 'Reservations[].Instances[].[InstanceType, Placement.AvailabilityZone]' \
--output text \
--region us-west-2 \
--profile test |
sort |
uniq --count
等待每个堆栈完成创建后,我检查了唯一 spot 实例池的数量。
SpotInstancePools
设置为 1
,我看到 3 个唯一池。
5 t2.small us-west-2a
5 t3.small us-west-2b
6 t3.small us-west-2c
其中 SpotInstancePools
设置为 5
,我看到 11 个唯一池。
2 t2.medium us-west-2a
1 t2.medium us-west-2b
1 t2.medium us-west-2c
2 t2.small us-west-2a
2 t2.small us-west-2b
1 t2.small us-west-2c
1 t3.medium us-west-2a
1 t3.medium us-west-2b
1 t3.medium us-west-2c
2 t3.small us-west-2b
2 t3.small us-west-2c
在每种情况下,我都希望池的数量等于参数值。
您看到的是功能发行说明中描述的正常行为:https://aws.amazon.com/blogs/aws/new-ec2-auto-scaling-groups-with-multiple-instance-types-purchase-options/
重点段落:
Spot Allocation Strategy – Control the amount of per-AZ diversity for the Spot Instances. A larger number adds some flexibility at times when a particular instance type is in high demand within an AZ.
此处解释了权重对实例识别和分组方式的影响:https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
您可以 modify/force 通过在模板的 Overrides
部分设置一些限制来实现 InstanceType 和 AvailabilityZone 等功能,如下所述:https://docs.aws.amazon.com/AWSCloudFormation/latest/UserGuide/aws-properties-autoscaling-autoscalinggroup-instancesdistribution.html#cfn-as-mixedinstancespolicy-spotinstancepools
因此,本身并没有错,但如果愿意,您可以添加一些约束以使池等于参数。
正如 指出的那样,ASG 的 SpotInstancePools
属性 控制每个可用区 池的数量 。
我基于文档的前提是错误的。在我的例子中,池的数量是每个可用区 (AZ) 中不同实例类型的最大数量。
考虑到这一点,示例结果更有意义。
当SpotInstancePools
为1
时,每个AZ的实例类型不超过1个
当SpotInstancesPools
为5
时,us-west-2a有3个实例类型,us-west-2b有4个实例类型,us-west-2c有4个实例类型。
在我的例子中,设置超过 4 个池可能没有什么区别,因为覆盖列表中只有 4 个实例类型。
为什么 us-west-2d 中没有实例?在撰写本文时,此示例中使用的实例类型在该 AZ 中不可用。尝试启动一个会导致错误。
我正在设置一个具有 mixed instances policy 的自动扩展组 (ASG) 以使用多个 Spot 实例类型。如何限制我的 ASG 使用的 Spot 实例池的数量?
Spot Instance pools定义如下:
A set of unused EC2 instances with the same instance type (for example,
m5.large
), operating system, Availability Zone, and network platform.
我明白,在我的例子中,竞价型实例池基本上是一对不同的可用区和实例类型。
我的 CloudFormation 模板使用混合实例策略创建了一个包含 16 个实例的自动缩放组。它使用四种实例类型和所有可用区。测试区域 us-west-2
有四个可用区。理论上,该组应该可以使用多达十六个spot isstance pool。
堆栈的 SpotInstancePools
参数设置 ASG 的同名 属性。我试过设置各种值,但似乎并不能直接控制ASG使用的spot实例池的数量。
CloudFormation 模板:
AWSTemplateFormatVersion: '2010-09-09'
Description: Testing mixed instance policies
Parameters:
SpotInstancePools:
Type: Number
Default: 1
Description: The ASG's number of spot instance pools.
ImageId:
Type: AWS::EC2::Image::Id
Default: ami-061392db613a6357b
Description: Launch template's AMI. Defaults to Amazon Linux 2.
Resources:
AutoScalingGroup:
Type: AWS::AutoScaling::AutoScalingGroup
Properties:
AvailabilityZones: !GetAZs
MaxSize: 16
MinSize: 16
MixedInstancesPolicy:
InstancesDistribution:
OnDemandAllocationStrategy: prioritized
OnDemandBaseCapacity: 0
OnDemandPercentageAboveBaseCapacity: 0
SpotAllocationStrategy: lowest-price
SpotInstancePools: !Ref SpotInstancePools
SpotMaxPrice: ''
LaunchTemplate:
LaunchTemplateSpecification:
LaunchTemplateId: !Ref LaunchTemplate
Version: !GetAtt LaunchTemplate.LatestVersionNumber
Overrides:
- InstanceType: t2.small
- InstanceType: t3.small
- InstanceType: t2.medium
- InstanceType: t3.medium
LaunchTemplate:
Type: AWS::EC2::LaunchTemplate
Properties:
LaunchTemplateData:
ImageId: !Ref ImageId
创建堆栈的命令 mixed-instances-policy-test-1
,其 SpotInstancePools 计数为 1:
aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-1 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=1 \
--region us-west-2 \
--profile test
创建堆栈的命令 mixed-instances-policy-5
,其 SpotInstancePools 计数为 5:
aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-5 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=5 \
--region us-west-2 \
--profile test
列出使用的唯一 spot 实例池数量的命令(根据需要替换堆栈名称):
aws ec2 describe-instances \
--filters 'Name=tag:aws:cloudformation:stack-name,Values=mixed-instances-policy-test-1' \
--query 'Reservations[].Instances[].[InstanceType, Placement.AvailabilityZone]' \
--output text \
--region us-west-2 \
--profile test |
sort |
uniq --count
等待每个堆栈完成创建后,我检查了唯一 spot 实例池的数量。
SpotInstancePools
设置为 1
,我看到 3 个唯一池。
5 t2.small us-west-2a
5 t3.small us-west-2b
6 t3.small us-west-2c
其中 SpotInstancePools
设置为 5
,我看到 11 个唯一池。
2 t2.medium us-west-2a
1 t2.medium us-west-2b
1 t2.medium us-west-2c
2 t2.small us-west-2a
2 t2.small us-west-2b
1 t2.small us-west-2c
1 t3.medium us-west-2a
1 t3.medium us-west-2b
1 t3.medium us-west-2c
2 t3.small us-west-2b
2 t3.small us-west-2c
在每种情况下,我都希望池的数量等于参数值。
您看到的是功能发行说明中描述的正常行为:https://aws.amazon.com/blogs/aws/new-ec2-auto-scaling-groups-with-multiple-instance-types-purchase-options/
重点段落:
Spot Allocation Strategy – Control the amount of per-AZ diversity for the Spot Instances. A larger number adds some flexibility at times when a particular instance type is in high demand within an AZ.
此处解释了权重对实例识别和分组方式的影响:https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting
您可以 modify/force 通过在模板的 Overrides
部分设置一些限制来实现 InstanceType 和 AvailabilityZone 等功能,如下所述:https://docs.aws.amazon.com/AWSCloudFormation/latest/UserGuide/aws-properties-autoscaling-autoscalinggroup-instancesdistribution.html#cfn-as-mixedinstancespolicy-spotinstancepools
因此,本身并没有错,但如果愿意,您可以添加一些约束以使池等于参数。
正如 SpotInstancePools
属性 控制每个可用区 池的数量 。
我基于文档的前提是错误的。在我的例子中,池的数量是每个可用区 (AZ) 中不同实例类型的最大数量。
考虑到这一点,示例结果更有意义。
当SpotInstancePools
为1
时,每个AZ的实例类型不超过1个
当SpotInstancesPools
为5
时,us-west-2a有3个实例类型,us-west-2b有4个实例类型,us-west-2c有4个实例类型。
在我的例子中,设置超过 4 个池可能没有什么区别,因为覆盖列表中只有 4 个实例类型。
为什么 us-west-2d 中没有实例?在撰写本文时,此示例中使用的实例类型在该 AZ 中不可用。尝试启动一个会导致错误。