Composant ZooKeeper facultatif de Managed Service pour Apache Spark

Le composant Apache ZooKeeper est un service centralisé permettant la synchronisation distribuée des données. Vous pouvez installer ZooKeeper lorsque vous créez un cluster Managed Service pour Apache Spark à l'aide de la fonctionnalité Composants facultatifs.

Installer le composant

Installez le composant lorsque vous créez un cluster Managed Service pour Apache Spark.

Consultez Versions d'image compatibles pour connaître la version du composant incluse dans chaque version d'image Managed Service pour Apache Spark.

ConsoleGoogle Cloud

  1. Dans la console Google Cloud , ouvrez la page Créer un cluster.
  2. Cliquez sur Configuration supplémentaire pour développer cette section.
  3. Modifiez les composants facultatifs.
  4. Dans le panneau qui s'ouvre, cochez la case ZooKeeper, puis cliquez sur Enregistrer.

gcloud CLI

Pour créer un cluster Managed Service pour Apache Spark incluant le composant ZooKeeper, exécutez la commande gcloud dataproc clusters create cluster-name avec l'option --optional-components (en utilisant la version d'image 1.0 ou ultérieure).

gcloud dataproc clusters create cluster-name \
    --optional-components=ZOOKEEPER \
    --region=region \
    ... other flags

API REST

Le composant ZooKeeper peut être spécifié via l'API Dataproc à l'aide de SoftwareConfig.Component dans le cadre d'une requête clusters.create.