如何同步 Bigquery 和 Oracle 数据库 with/without 数据流?
How to synchronize Bigquery and Oracle Database with/without Dataflow?
我尝试使用 Dataflow template。
我意识到这是批处理而不是流。此模板不会使 Bigquery 与 Oracle 数据库同步,而只是复制并粘贴数据。
我尝试定期 运行 相同的作业,但重复的数据被添加到 Bigquery。我看到一些第三方解决方案可以做同样的事情,但我想尽可能多地使用第一方解决方案。
是否可以让 Bigquery 与 oracle 数据库同步?
我认为您需要的是一个从 Oracle 数据库读取更改的源。不幸的是,当前的 Beam JDBC 源无法满足此目的,因此您可能必须为此开发新的源。
我尝试使用 Dataflow template。
我意识到这是批处理而不是流。此模板不会使 Bigquery 与 Oracle 数据库同步,而只是复制并粘贴数据。
我尝试定期 运行 相同的作业,但重复的数据被添加到 Bigquery。我看到一些第三方解决方案可以做同样的事情,但我想尽可能多地使用第一方解决方案。
是否可以让 Bigquery 与 oracle 数据库同步?
我认为您需要的是一个从 Oracle 数据库读取更改的源。不幸的是,当前的 Beam JDBC 源无法满足此目的,因此您可能必须为此开发新的源。