使用 Google Deployment Manager 将 Hive 表部署到 Dataproc 集群
Deploy Hive tables to Dataproc cluster using Google Deployment Manager
我想将我的 HIVE 表迁移到现有的 Dataproc 集群。有什么方法可以使用 Google Deployment Manager
部署表。我检查了 GDM 中支持的资源类型列表;找不到配置单元资源类型。但是,有一个可用的 dataproc.v1.cluster
实例,我能够成功部署数据处理集群。现在,有什么方法可以在集群中部署我的 HIVE
ddls 吗?
为了自定义集群,我们建议 initialization actions。
如果您的 Hive 表全部设置为 EXTERNAL
,并且在 GCS 或 BigQuery 中包含数据,您可以从设置 metastore on Cloud SQL
中获益
我想将我的 HIVE 表迁移到现有的 Dataproc 集群。有什么方法可以使用 Google Deployment Manager
部署表。我检查了 GDM 中支持的资源类型列表;找不到配置单元资源类型。但是,有一个可用的 dataproc.v1.cluster
实例,我能够成功部署数据处理集群。现在,有什么方法可以在集群中部署我的 HIVE
ddls 吗?
为了自定义集群,我们建议 initialization actions。
如果您的 Hive 表全部设置为 EXTERNAL
,并且在 GCS 或 BigQuery 中包含数据,您可以从设置 metastore on Cloud SQL