如何最好地使用 Google Cloud Workflows 回填数据

How best to backfill data with Google Cloud Workflows

我正在加快 GCP 工作流的速度。使用 Workflows 处理回填数据的最佳实践是什么,是否有像 airflow 这样的内置方法?如果没有,那么看起来最好的选择是传入一个 start_date 并在增加日期的同时继续循环子工作流。

我相信您可以找到如何在 official Google documentation on backfiling 上回档,尽管这确实专门针对 BigQuery...这是您提到的上下文中最有意义的内容,因为工作流程是更多的是……作业调度程序?我猜?

如果这不是您所指的内容,那么您能否说明您正尝试使用 GCP 工作流程做什么?
我问是因为根据 overview for Google Workflows 中的工作流定义,它们实际上没有 associated/built-in 方法,它们只是调用您为它们编程的方法。