Cloud Dataflow 中的 'side inputs' 是否支持从 BigQuery 视图读取数据?
Do 'side inputs' in Cloud Dataflow support reading from BigQuery views?
试图将辅助输入指向 BigQuery 视图,而不是直接指向 BigQuery table。它不会产生错误,而只是 returns 0 行。 View 在 BigQuery 中工作正常。
例如,给定一个仅包含 1 行的 table 'types_test' 视图:
在 BigQuery 中,它工作正常:
但是使用视图作为 Dataflow 中的辅助输入 return 0 行:
INFO: Reading from BigQuery table <removed>:CPT_7414_PLAYGROUND.view_test
Mar 20, 2015 11:10:08 PM com.google.cloud.dataflow.sdk.io.BigQueryIO evaluateReadHelper
INFO: Number of records read from BigQuery: 0
辅助输入是否支持 BigQuery 中的视图,或者您是否需要执行其他操作才能将视图用于辅助输入?
在常见问题解答中发现,当前不支持该视图。
试图将辅助输入指向 BigQuery 视图,而不是直接指向 BigQuery table。它不会产生错误,而只是 returns 0 行。 View 在 BigQuery 中工作正常。
例如,给定一个仅包含 1 行的 table 'types_test' 视图:
在 BigQuery 中,它工作正常:
但是使用视图作为 Dataflow 中的辅助输入 return 0 行:
INFO: Reading from BigQuery table <removed>:CPT_7414_PLAYGROUND.view_test
Mar 20, 2015 11:10:08 PM com.google.cloud.dataflow.sdk.io.BigQueryIO evaluateReadHelper
INFO: Number of records read from BigQuery: 0
辅助输入是否支持 BigQuery 中的视图,或者您是否需要执行其他操作才能将视图用于辅助输入?
在常见问题解答中发现,当前不支持该视图。