Apache Spark용 관리형 서비스 선택적 Hive WebHCat 구성요소

Hive WebHCat 구성요소를 사용하면 REST API를 통해 HCatalog와 상호작용할 수 있습니다. 선택적 구성요소 기능을 사용하여 Managed Service for Apache Spark 클러스터를 만들 때 WebHCat을 설치할 수 있습니다. REST 서비스는 클러스터의 첫 번째 마스터 노드에 있는 포트 50111에서 사용할 수 있습니다.

구성요소 설치

Managed Service for Apache Spark 클러스터를 만들 때 구성요소를 설치합니다. 구성요소는 Managed Service for Apache Spark 버전 1.3 이상으로 만든 클러스터에 추가할 수 있습니다.

각 Managed Service for Apache Spark 이미지 출시에 포함된 구성요소 버전은 지원되는 Managed Service for Apache Spark 버전을 참조하세요.

Google Cloud 콘솔

  1. Google Cloud 콘솔에서 클러스터 만들기 페이지를 엽니다.
  2. 추가 구성을 클릭하여 해당 섹션을 펼칩니다.
  3. 선택적 구성요소를 수정합니다.
  4. 열리는 패널에서 Hive WebHCat 체크박스를 선택한 후 저장을 클릭합니다.

gcloud CLI

Hive WebHCat 구성요소를 포함하는 Managed Service for Apache Spark 클러스터를 만들려면 gcloud dataproc clusters create cluster-name 명령어를 --optional-components 플래그와 함께 사용합니다.

gcloud dataproc clusters create cluster-name \
    --optional-components=HIVE_WEBHCAT \
    --region=region \
    ... other args

REST API

Hive WebHCat 구성요소는 clusters.create 요청의 일부로 SoftwareConfig.Component를 사용하여 Dataproc API를 통해 지정할 수 있습니다.