如何限制ASG中竞价型实例池的数量?

How to limit the number of spot instace pools in an ASG?

我正在设置一个具有 mixed instances policy 的自动扩展组 (ASG) 以使用多个 Spot 实例类型。如何限制我的 ASG 使用的 Spot 实例池的数量?

Spot Instance pools定义如下:

A set of unused EC2 instances with the same instance type (for example, m5.large), operating system, Availability Zone, and network platform.

我明白,在我的例子中,竞价型实例池基本上是一对不同的可用区和实例类型。

我的 CloudFormation 模板使用混合实例策略创建了一个包含 16 个实例的自动缩放组。它使用四种实例类型和所有可用区。测试区域 us-west-2 有四个可用区。理论上,该组应该可以使用多达十六个spot isstance pool。

堆栈的 SpotInstancePools 参数设置 ASG 的同名 属性。我试过设置各种值,但似乎并不能直接控制ASG使用的spot实例池的数量。

CloudFormation 模板:

AWSTemplateFormatVersion: '2010-09-09'
Description: Testing mixed instance policies

Parameters:

  SpotInstancePools:
    Type: Number
    Default: 1
    Description: The ASG's number of spot instance pools.

  ImageId:
    Type: AWS::EC2::Image::Id
    Default: ami-061392db613a6357b
    Description: Launch template's AMI. Defaults to Amazon Linux 2.

Resources:

  AutoScalingGroup:
    Type: AWS::AutoScaling::AutoScalingGroup
    Properties:
      AvailabilityZones: !GetAZs
      MaxSize: 16
      MinSize: 16
      MixedInstancesPolicy:
        InstancesDistribution:
          OnDemandAllocationStrategy: prioritized
          OnDemandBaseCapacity: 0
          OnDemandPercentageAboveBaseCapacity: 0
          SpotAllocationStrategy: lowest-price
          SpotInstancePools: !Ref SpotInstancePools
          SpotMaxPrice: ''
        LaunchTemplate:
          LaunchTemplateSpecification:
            LaunchTemplateId: !Ref LaunchTemplate
            Version: !GetAtt LaunchTemplate.LatestVersionNumber
          Overrides:
            - InstanceType: t2.small
            - InstanceType: t3.small
            - InstanceType: t2.medium
            - InstanceType: t3.medium

  LaunchTemplate:
    Type: AWS::EC2::LaunchTemplate
    Properties:
      LaunchTemplateData:
        ImageId: !Ref ImageId

创建堆栈的命令 mixed-instances-policy-test-1,其 SpotInstancePools 计数为 1:

aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-1 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=1 \
--region us-west-2 \
--profile test

创建堆栈的命令 mixed-instances-policy-5,其 SpotInstancePools 计数为 5:

aws cloudformation create-stack \
--stack-name mixed-instances-policy-test-5 \
--template-body file://mixed-instances-policy.yaml \
--parameters ParameterKey=SpotInstancePools,ParameterValue=5 \
--region us-west-2 \
--profile test

列出使用的唯一 spot 实例池数量的命令(根据需要替换堆栈名称):

aws ec2 describe-instances \
--filters 'Name=tag:aws:cloudformation:stack-name,Values=mixed-instances-policy-test-1' \
--query 'Reservations[].Instances[].[InstanceType, Placement.AvailabilityZone]' \
--output text \
--region us-west-2 \
--profile test |
sort |
uniq --count

等待每个堆栈完成创建后,我检查了唯一 spot 实例池的数量。

SpotInstancePools 设置为 1,我看到 3 个唯一池。

      5 t2.small    us-west-2a
      5 t3.small    us-west-2b
      6 t3.small    us-west-2c

其中 SpotInstancePools 设置为 5,我看到 11 个唯一池。

      2 t2.medium   us-west-2a
      1 t2.medium   us-west-2b
      1 t2.medium   us-west-2c
      2 t2.small    us-west-2a
      2 t2.small    us-west-2b
      1 t2.small    us-west-2c
      1 t3.medium   us-west-2a
      1 t3.medium   us-west-2b
      1 t3.medium   us-west-2c
      2 t3.small    us-west-2b
      2 t3.small    us-west-2c

在每种情况下,我都希望池的数量等于参数值。

您看到的是功能发行说明中描述的正常行为:https://aws.amazon.com/blogs/aws/new-ec2-auto-scaling-groups-with-multiple-instance-types-purchase-options/

重点段落:

Spot Allocation Strategy – Control the amount of per-AZ diversity for the Spot Instances. A larger number adds some flexibility at times when a particular instance type is in high demand within an AZ.

此处解释了权重对实例识别和分组方式的影响:https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/spot-fleet.html#spot-instance-weighting

您可以 modify/force 通过在模板的 Overrides 部分设置一些限制来实现 InstanceType 和 AvailabilityZone 等功能,如下所述:https://docs.aws.amazon.com/AWSCloudFormation/latest/UserGuide/aws-properties-autoscaling-autoscalinggroup-instancesdistribution.html#cfn-as-mixedinstancespolicy-spotinstancepools

因此,本身并没有错,但如果愿意,您可以添加一些约束以使池等于参数。

正如 指出的那样,ASG 的 SpotInstancePools 属性 控制每个可用区 池的数量

我基于文档的前提是错误的。在我的例子中,池的​​数量是每个可用区 (AZ) 中不同实例类型的最大数量。

考虑到这一点,示例结果更有意义。

SpotInstancePools1时,每个AZ的实例类型不超过1个

SpotInstancesPools5时,us-west-2a有3个实例类型,us-west-2b有4个实例类型,us-west-2c有4个实例类型。

在我的例子中,设置超过 4 个池可能没有什么区别,因为覆盖列表中只有 4 个实例类型。

为什么 us-west-2d 中没有实例?在撰写本文时,此示例中使用的实例类型在该 AZ 中不可用。尝试启动一个会导致错误。