Spring Cloud Data Flow:无法启动同一任务的多个实例

Spring Cloud Data Flow : Unable to launch multiple instances of the same Task

TL;DR

Spring Cloud Data Flow 不允许多次执行同一任务,即使 documentation 表示这是默认行为。我们如何允许 SCDF 使用 Java DSL 启动任务同时 运行 同一任务的多个实例?为了让事情变得更有趣,例如使用 curl 直接点击其余的点时,多次启动相同的任务效果很好。

背景:

我有一个 Spring 云数据流任务,我已经在 Spring Cloud Data Flow UI Dashboard

中预先注册了
@SpringBootApplication
@EnableTask
public class TaskApplication implements ApplicationRunner {

    private static final Logger LOGGER = LoggerFactory.getLogger(TaskApplication.class);

    public static void main(String[] args) {
        SpringApplication.run(TaskApplication.class, args);
    }

    @Override
    public void run(ApplicationArguments args) throws InterruptedException {
        //Some application code
    }
    
}

我正在使用其他一些主程序中的 Task Java DSL 启动此任务:

URI dataFlowUri = URI.create(scdfUri);
DataFlowOperations dataFlowOperations = new DataFlowTemplate(dataFlowUri);
Task task = Task.builder(dataFlowOperations).name("Task1").definition("a:task1")
                .description("Task launched from DSL").build();         
long executionId = task.launch(new ArrayList<>());

这第一次工作得很好;但是,当我尝试重新 运行 上面的代码时,我在上面的程序中得到以下异常:

[main] DEBUG org.springframework.web.client.RestTemplate - Response 409 CONFLICT

SCDF 服务器日志显示类似的问题:

2021-05-12 15:12:31.387  WARN 1 --- [nio-9393-exec-3] o.s.c.d.s.c.RestControllerAdvice         : Caught exception while handling a request: Cannot register task Task1 because another one has already been registered with the same name

有趣的是,如果我使用 API guide

中所示的 curl 命令,我可以启动同一任务的多个实例

问题:

  1. 根据SCDF Task documentation,一个任务可以默认重新运行。不需要额外的配置就可以重新运行同样的任务;然而,事实似乎恰恰相反。默认情况下,SCDF 不允许重新运行 任务?

  2. 我尝试按照建议添加 Spring 集成 jar,并明确将 spring.cloud.task.single-instance-enabled 属性 设置为 false 但开始 运行ning 进入 NoClassDefFoundError 相关问题。我也尝试将此 属性 传递给 Task.launch 方法,但这并没有解决问题。

  3. 为什么同一个任务使用curl命令可以多次重启,而使用Java DSL却不能多次重启?

在这种情况下,您似乎正在尝试重新创建任务定义。您应该只需要创建一次任务定义。根据这个定义,您可以多次启动。例如:

URI dataFlowUri = URI.create(scdfUri);
DataFlowOperations dataFlowOperations = new DataFlowTemplate(dataFlowUri);
Task task = Task.builder(dataFlowOperations).name("Task1").definition("a:task1")
                .description("Task launched from DSL").build();         
long executionId = task.launch(new ArrayList<>());
executionId = task.launch(new ArrayList<>());
executionId = task.launch(new ArrayList<>());