使用 api 将数据加载到 BigQuery

Loading data into BigQuery with api

我如何每天在规定的时间内使用 API 从 CRM 将数据加载到 BigQuery?

我要构建的系统非常复杂:我需要从 Google 分析、一些无连接器服务和 CRM 收集数据,唯一可能的交互方式是通过 API。

问题是可以每天使用 API 请求获取数据并将其添加到指定的 table 中,例如在 Google 的 Apipheny 连接器中张。

有关设置自动 Google Analytics 导出到 BigQuery 的一些信息,因为您首先提到了这一点:https://support.google.com/analytics/answer/3437618?hl=en

如果您想避免从头开始构建自己的工具,请查看数据传输服务 (DTS)。 DTS 的目的是自动启用托管传输,并且可能能够处理您在问题中提到的其他来源。

除了支持来自其他 Google 服务的传输外,它还支持来自各种来源的第三方传输。查看 https://cloud.google.com/bigquery-transfer/docs/third-party-transfer 以了解更多信息。