Componente opcional do ZooKeeper do Serviço Gerenciado para Apache Spark

É possível instalar componentes adicionais, como o ZooKeeper, ao criar um cluster do Serviço Gerenciado para Apache Spark usando o recurso Componentes opcionais. Esta página descreve o componente ZooKeeper.

O componente Apache ZooKeeper é um serviço centralizado que realiza sincronização distribuída de dados.

Instalar o componente

Instale o componente ao criar um cluster do Serviço Gerenciado para Apache Spark.

Consulte Versões de imagem compatíveis para a versão do componente incluída em cada versão de imagem do Serviço Gerenciado para Apache Spark.

Google Cloud Console do

  1. No Google Cloud console do Cloud, abra a página Criar cluster.
  2. Clique em Configuração adicional para expandir a seção.
  3. Edite Componentes opcionais.
  4. No painel que aparece, selecione a caixa de seleção para ZooKeeper, e clique em Salvar.

CLI gcloud

Para criar um cluster do Serviço Gerenciado para Apache Spark que inclua o componente ZooKeeper, use o comando gcloud dataproc clusters create cluster-name com a flag --optional-components (usando a versão 1.0 ou mais recente da imagem).

gcloud dataproc clusters create cluster-name \
    --optional-components=ZOOKEEPER \
    --region=region \
    ... other flags

API REST

O componente ZooKeeper pode ser especificado por meio da API Dataproc usando SoftwareConfig.Component como parte de uma solicitação clusters.create.