每小时在 Spark 作业服务器中安排自动 Spark 作业

Question

在DataStax Enterprise Edition 4.8 , Spark Jobserver中，0.5.2 专门针对支持的 Apache Spark 1.4.1.1 版本进行了编译。 Spark 作业将从 Cassandra 读取数据并将汇总数据写入同一键空间中的另一个 table。

Spark 作业服务器是否有任何功能可以在每小时后自动将作业安排到 运行？

Answer 1

很遗憾，Spark Jobserver 目前没有任何安排作业的功能。

也许您可以在 linux 上使用 cron 任务来自动 运行 curl 命令向 Jobserver 发送请求。