Google云平台数据展示

Google Cloud Platform Data Display

我目前在 Google Cloud Platform 上有一个应用程序 运行,它正在收集大量数据并将其存储在 Google Cloud Datastore 中,我正在显示这些数据在使用 Google Data Studio 的图中。但是,为了这样做,我必须将数据备份发送到 Google Cloud Storage,然后将这些备份加载到 Google BiqQuery,然后可以将其绘制在 Google Data 上工作室。由于我的应用程序正在实时收集实时数据,因此这是一个不太理想的解决方案,因为我无法在我的地块上查看实时数据:只能查看我已经备份和加载的数据。我想知道是否有更好的方法可以直接在 Google Data Studio 中显示实时数据?我正在考虑的替代方案是为我的应用程序编写一个前端页面,然后在 Python 中手动完成这一切,我希望尽可能避免这种情况。

非常感谢任何建议!

我会调查将数据从应用程序直接推送到 BiqQuery。来自 Streaming Data into BigQuery:

Instead of using a job to load data into BigQuery, you can choose to stream your data into BigQuery one record at a time by using the tabledata().insertAll() method. This approach enables querying data without the delay of running a load job. This document discusses several important trade-offs to consider before choosing an approach, including streaming quotas, data availability, and data consistency.