Managed Service for Apache Spark 可选 Hive WebHCat 组件

Hive WebHCat 组件可让您通过 REST API 与 HCatalog 进行交互。使用可选组件功能创建 Managed Service for Apache Spark 集群时，可以安装 WebHCat。您可以通过集群的第一个主节点上的 50111 端口访问 REST 服务。

安装组件

在创建 Managed Service for Apache Spark 集群时安装组件。 组件可添加到使用 Managed Service for Apache Spark 版本 1.3 及更高版本创建的集群中。

如需查看每个 Managed Service for Apache Spark 映像版本中包含的组件版本，请参阅支持的 Managed Service for Apache Spark 版本。

Google Cloud 控制台

  1. 在 Google Cloud 控制台中，打开创建集群页面。
  2. 点击其他配置以展开该部分。
  3. 修改可选组件。
  4. 在打开的面板中，选中 Hive WebHCat 复选框，然后点击保存。

gcloud CLI

如需创建包含 Hive WebHCat 组件的 Managed Service for Apache Spark 集群，请使用带有 --optional-components 标志的 gcloud dataproc clusters create cluster-name 命令。

gcloud dataproc clusters create cluster-name \
    --optional-components=HIVE_WEBHCAT \
    --region=region \
    ... other args

REST API

可通过 Dataproc API 在 clusters.create 请求中使用 SoftwareConfig.Component 来指定 Hive WebHCat 组件。