数据流服务器和船长角色

data flow server and skippers role

数据流服务器和船长在部署流应用程序后是否有任何活动角色(除了维护状态)。以不同的方式询问,例如,如果我有一个 http source 和 amqp sink ,从 http 到 amqp 的任何流量是否通过数据流服务器或船长?

SCDF 和 Skipper 均未与流式处理或批处理交互或参与其中。他们都负责设计和部署由 streaming/batch 个应用程序组成的数据管道。为了完成设计和部署部分,我们提供了多种工具,包括 UI、CLI、RESTful API 和 Java DSL。

换句话说,如果您使用 SCDF 部署流或任务数据管道,数据管道中涉及的应用程序将单独负责数据处理——没有数据会通过 SCDF 或 Skipper。这些应用程序独立地解决用例需求。 SCDF(和 Skipper)将帮助集中监控、管理和持续交付应用程序。

您可以从文档的架构部分阅读有关 responsibilities 的更多信息。