使用 Pyspark 连接到 Amazon Aurora
Connect to Amazon Aurora using Pyspark
我是 Pyspark 的新手。我正在尝试使用 Pyspark 从 Databricks 连接到 Amazon Aurora。
任何人都可以分享示例代码以使用 Pysparks 从 Databricks 连接到 Amazon Aurora。
经过一些分析，我得到了自己问题的答案。与连接其他oracle数据库一样。
这里我们需要安装 post-gres 驱动程序作为 pre-requisite.
SparkSession.builder.appName("Aurora_Database_Connection").getOrCreate()
driver_aurora = "org.postgresql.Driver"
query="your query"
df = spark.read.format("jdbc").option("driver", driver).option("url", url).option("user", username).\
option("password", password).option("query", query).load()
我是 Pyspark 的新手。我正在尝试使用 Pyspark 从 Databricks 连接到 Amazon Aurora。 任何人都可以分享示例代码以使用 Pysparks 从 Databricks 连接到 Amazon Aurora。
经过一些分析，我得到了自己问题的答案。与连接其他oracle数据库一样。
这里我们需要安装 post-gres 驱动程序作为 pre-requisite.
SparkSession.builder.appName("Aurora_Database_Connection").getOrCreate()
driver_aurora = "org.postgresql.Driver"
query="your query"
df = spark.read.format("jdbc").option("driver", driver).option("url", url).option("user", username).\
option("password", password).option("query", query).load()