aws glue 作业事件存储在哪里?
Where does aws glue job events store?
我在 aws 中有两个作业 Glue.The 两个作业都可以手动 运行 successfully.And 我定义了一个触发器,当作业 1 [=15] 时,它将触发作业 2 到 运行 =] succeeded.But 触发器不起作用。
有人知道作业事件存储在哪里,或者如何调试吗?
您必须创建另一个启动作业 1 的按需触发器。
这就是 AWS Glue 现在的设计方式 - 仅当完成的作业由触发器启动(而不是 运行 临时)时,依赖作业才会启动。要创建作业依赖链,请使用计划或按需触发器启动链中的第一个作业。最初的想法是,我们希望让工作单独进行测试,一旦每个工作看起来不错,客户就可以创建工作流程并让他们 运行.
AWS Glue sends events to CloudWatch 这样您就可以创建一个 CloudWatch 规则来调用 lambda,转发到 SQS/SNS 等
我在 aws 中有两个作业 Glue.The 两个作业都可以手动 运行 successfully.And 我定义了一个触发器,当作业 1 [=15] 时,它将触发作业 2 到 运行 =] succeeded.But 触发器不起作用。 有人知道作业事件存储在哪里,或者如何调试吗?
您必须创建另一个启动作业 1 的按需触发器。
这就是 AWS Glue 现在的设计方式 - 仅当完成的作业由触发器启动(而不是 运行 临时)时,依赖作业才会启动。要创建作业依赖链,请使用计划或按需触发器启动链中的第一个作业。最初的想法是,我们希望让工作单独进行测试,一旦每个工作看起来不错,客户就可以创建工作流程并让他们 运行.
AWS Glue sends events to CloudWatch 这样您就可以创建一个 CloudWatch 规则来调用 lambda,转发到 SQS/SNS 等